我的货车驾驶员自卸车司机与码头卖沙子的老板发生争执，双方打架，我驾驶员一人，沙场两人打我司机后报警，沙场俩人住院，对方将我货车扣留在他们沙场，不让我开走，派出所第一次出警时要求我方驾驶员与对方两人都各自先去医院治疗，后协商解决，现在对方不让我开车，将我车扣在他们场地，我找派出所，派出所告诉我让我去协商解决！我该怎么办？他们两个人打我驾驶员一人，现在还扣我车辆难道法律真是给有权有背景的人而服务的吗？对方给我要两万块钱才肯放我车