我向江苏常熟的一家布料厂家订购一批面料，订单合同有注明“布料需通过16CFR1615的燃烧测试”，但收到大货样品办却测试不通过。现我要求对方退回订金和之预付的部分货款，但对方总是以手头没钱为由，不退钱共3万多。请问该怎么办。