丈夫是典型的富二代，他父母一直认为是我高攀了他们家，我们俩不管是谁错，他们总是责怪我。最近，丈夫和别的女人被我捉奸在床，我告诉婆婆，婆婆却说我无德，自己的丈夫没看好怪谁。于是我想离婚，但是他们家不肯，即使采用法律，他们家的势力那么大也会不允许的。我该怎么办？