通常情况下，夫妻双方离婚的时候是不会退彩礼的，因为没有那个必要，除非夫妻双方在领证之后并没有在一起生活，即有夫妻之名没有夫妻之实;亦或者男方给完了彩礼导致在婚后的生活特别困难的，在上述两种情况下，女方是应当把彩礼退还给男方的。
法律依据：《最高人民法院关于适用〈中华人民共和国民法典〉婚姻家庭编的解释(一)》
第五条 当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持：
(一)双方未办理结婚登记手续;
(二)双方办理结婚登记手续但确未共同生活;
(三)婚前给付并导致给付人生活困难。
适用前款第二项、第三项的规定，应当以双方离婚为条件。
如果是因为男方的原因导致婚约解除的，返还彩礼的数额可根据其过错程度、双方的经济状况等因素，酌情减少，减少的数额一般确定为彩礼总额的10%至50%之间。
男女双方未办理结婚登记手续而共同生活一年以上两年以下，一方请求对方返还彩礼的，返还的数额一般不超过彩礼总额的30%;共同生活一年以内三个月以上的，返还的数额一般不超过彩礼总额的50%;共同生活不满三个月的，返还的数额一般不超过彩礼总额的70%。因男方的原因导致同居关系解除的以及在共同生活期间女方怀孕或者流产的，可在前款的基础上再减少5%至20%。
法律依据：《最高人民法院关于适用〈中华人民共和国民法典〉婚姻家庭编的解释(一)》
第五条 当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持：
(一)双方未办理结婚登记手续;
(二)双方办理结婚登记手续但确未共同生活;
(三)婚前给付并导致给付人生活困难。
适用前款第二项、第三项的规定，应当以双方离婚为条件。
在离婚的时候，女方不退彩礼是不会怎么样的。但是如果在男方向法院起诉之后，法院判决女方退还彩礼，而女方在有能力退还的情况下，拒绝退还彩礼，那么这个时候女方涉嫌构成拒不执行判决裁定罪，严重的话甚至会坐牢。
法律依据：《中华人民共和国刑法》
第三百一十三条 【拒不执行判决、裁定罪】对人民法院的判决、裁定有能力执行而拒不执行，情节严重的，处三年以下有期徒刑、拘役或者罚金;情节特别严重的，处三年以上七年以下有期徒刑，并处罚金。
单位犯前款罪的，对单位判处罚金，并对其直接负责的主管人员和其他直接责任人员，依照前款的规定处罚。
以上就是小编整理出的关于离婚时彩礼的法律资料内容，希望对你有所帮助。如果还有不懂的地方可以在大律师网进行在线咨询，会有相关的律师为你解答详情。