我家打算在村里建一个鱼塘，在村里申请签了一块地，交了土地使用费8万。之后就开始兴建鱼塘，眼看就要建好开始经营了，村里突然说不能再建了，因为村里打算再建一所村委会办公楼，这块地被征用了。我是按着合同进行建设的，现在却被叫停。对我家的损失非常大，我想问这种情况能向村里要回那8万块钱和违约赔偿吗？