我是男方，订婚前说过买房，但是现在由于资金原因现在买不起房，第一，没有经过登记，第二，没有发生过任何关系，第三，我是杭州的，女方是温州的，除了过年女方从来不来我家，如果这样我退婚，定金可以拿回来么？