我跟我前夫去年离婚了，当时没有领证，只是私下自己签了协议，当时说了退给他们的钱以后各不纠缠，他们也签了，现在过了半年多了。他们家人说不承认那个合同，让我们再给他们钱，然后去我上班的地方闹，不让我上班，我走哪里他们跟到哪里，不让我回家，打电话报警，警察说他们管不了，让我们走了，现在天天就在我上班的地方不让我上班，我该怎么办？