离婚时娃娃是协商归的男方，主要当初考虑娃娃是男孩子(娃娃比较粘妈妈，爱哭)，怕他养成爱哭的习惯，但现在看来娃娃跟了男方后，男方上班经常不回家，家里就奶奶一个人带孩子，都快成留守儿童了，而且奶奶没啥文化，又不会交通工具，娃娃有时候生病都不能及时带去治疗，现在娃娃一天天长大，学习方面男方也不能辅导，（男方初中文化，女方大专），这种情况女方是否可以争回抚养权？