我奶奶在10年前去世了，去世前是我住在自己家，但由于我大爷和他住对门，所以一直由我大爷在身边照顾，但二大爷我父亲和老伯哥四个每周都去看，也一直在付给大爷抚养费，去世后留下了一套公产房的房产，大爷因为住在对门在奶奶去世后就自己住进奶奶屋了，自己的房子空着，由于挨着兄弟情分我二大爷我父亲和老伯一直没去讨说法，但是今年过年提到这事时大爷把我们全家赶了出去，并且说他抚养的所以房子和我们没关系，我想咨询一下您，能不能起诉他或者有律师调解他付给我们一部分钱，我们同意改承租权