我老家在浙江农村有一处房产，是70年底我大伯拿了部分自留地和爷爷的祖房拆后重建的，爷爷死后把房子分成了四份。我父亲分的一份，有土地证和房产证。目前我家重建房子，大伯武力阻扰，说有大概5平米的地是属于他的。要我们给钱，我父亲比较软弱。被大伯及父子殴打了一次，在村委会签了个协议，赔偿了28000给大伯。这个事情应该怎么处理比较好？可以到法院起诉勒索或者侵占财产吗？关键是我父亲签属了一个赔偿协议。怎么样才能挽回损失，并且通过法律手段制裁他们？