您好，咨询一下有经验的法律顾问朋友，我从施工单位购买抵工程款房子，定金已付，没有任何口头和书面约定说定金不退，收取的定金只有一个书面收据，上面写得是收到房款首付，现在不想要这个房子了，要求他返还定金遭拒，有什么办法拿回定金吗？谁能通过法律途径解决？