我爷爷有两个儿子一个女儿,我爸爸是大儿子,二十多年前,爷爷拿了一块地给我爸建房子,建的房子没有房产证,只有一个土地证证写的我爷爷的名字,但是建房子的钱都是我爸妈自己出的,没要任何人拿钱,也在房子住了20多年,现在爸爸的弟弟就是二儿子也想要这块地,意思就是说他不要房子,只要地,现在在家里闹矛盾,因为他比我爸爸小,所以爷爷奶奶就帮着他说话。但是总不能把房子拆了分地给他吧?所以就一直因为地的问题在家里吵。想问问这事情应该怎么处理?