案情：我父亲年轻时候犯了罪，跑路了带着我一直到七岁，那一年把我送了回来。他们自己在外边挣钱，有时候也往家里邮点儿钱。后来我长大了就自己把房子翻新了一下。总共他间接性的，出了4万块钱吧他也不给我成家。因为种种原因反目了现在我想，和他断绝关系，又不想把这个我辛辛苦苦，盖起来的家，让出去，我要怎么办？