您好！我在上周五通过一房产中介与一本市房主签定了房屋买卖合同，交了定金两万给中介，中介从中给15000元给房主，中介收5000元。经过反复考虑，我决定取消合同，两天后，与房主谈话，房主也同意取消合同，并打电话通知中介，可中介说我们这样是违反规则要多收2万罚款？有这样的吗？