请问，父母去世时弟弟8岁，由哥哥抚养长大，哥哥帮他盖了房子娶了媳妇儿。由于当时弟弟年纪较小，父母是由哥哥一个人养老送终的，弟弟没有尽到赡养老人的义务。父母有一处房子，没有立过遗嘱，哥哥与弟弟之间有过口头约定，（哥哥帮弟弟盖了房子，所以父母的房子没有弟弟的）后来哥哥也去世了，哥哥也没留下遗嘱。现在房子要拆迁。弟弟同哥哥的子女争夺父母留下来的房子。弟弟的做法对吗？弟弟有继承权吗？