六年前，我爸的单位分给我家一套旧集资房，按国家规定这套旧集资房的原户主这几年又购买了新的三套集资房，应该要退了旧房子，并将旧的房产证交给单位，但是原房主没有交给单位，现在我家要办理房产证，找到原户主，他们却不愿意配合，不肯交出房产证以致我家的房子还在他们名下。如果不想上法庭的话，还有什么办法能让他们交出房产证，并受到惩罚？