我是一名打工妹，在一家纺织厂上班。我大概工作了将近一年，合同是签两年的。因为家里的缘故，所以现在想辞职不做了。当我去找老板的时候，老板说按照合同扣工资，我觉得合理。但是他现在不肯归还我之前交的押金，我觉得这是极其不合理的。请问我现在该怎么办？我能拿回我的押金吗？