我的哥哥，2014年11月去世了，37岁。他的母亲在他7， 8岁的时候就离婚了，那个时候他的爸爸生病，然后36岁去世了，哥哥就一直由爷爷带大，他的母亲在他的另外一个村子重组家庭，从离开之后就一直没有尽到抚养义务，没有看过一眼。然后去年哥哥去世了，现在他想拿这个房子，这个房子是后来我们给哥哥重新盖得房子，现在三番五次的过来闹事，应该怎么解决。