双方可以协商解决，不行的话可以向法院起诉。具体的分配需要由法院进行判决确定，通常法院会根据我国法律规定对男方存在出轨这一过错行为进行认定并在女方要求支付精神损害赔偿的情况下，判决男方支付女方赔偿。