我跟人合伙一起做生意，有合作协议，合作一个月时间后他说家里有事需要回家处理一下，过几天就回来，然而总是拖着时间一直没有出来，已经回去一个半月时间了，还在跟我说要等他几天，我已经等不了了，一直亏损，没有记账弄的我都不知道亏了多少，所有钱都是在他手上，我该怎么要回我的投资款还有工资？