咨询下各位法律人士，本人以前经营小工厂，经常做货给当地客户，由于是纸面开单发货，没有签合同，签字等，做小生意的都是发货写单，由于跟对方要钱，对方总是想尽心思说你货一些不好，要扣掉上万等等，但是并没有依据，现在做生意的都是潜规则要收供应商礼物，吃供应商钱，请问这种没有合约的生意买卖，怎么讨好被无缘无故扣掉的钱，能用法律讨回这些钱，由专业人士请提供下，谢谢