Фамилия мужа без отца

Стоит ли брать фамилию мужа, отец которого в его раннем детстве страшно бросил семью? Мой парень отца совсем не помнит и говорит о нем как о плохом человеке, который ограбил его мать. Соответственно родню по линии отца совсем не знает.
У парня фамилия очень простая и часто встречается и не созвучна с мои ИО, моя же очень редкая и звучит красиво с его ИО. Как можно найти перемирие?