我离婚时房子在前夫名下。协议上约定好了女儿跟他生活。是因为想孩子稳定下来。受到好的教育跟好的环境生活。协议上是签的不影响孩子学习的情况下可见。但我都是一月见不到四次。现在他把我从女儿手表里剔除。又把孩子让奶奶带到湖北农村去上学。我想要回抚养权。让女儿跟我生活。难吗？