法律分析：离婚时要退还彩礼的情形有以下几种：
（一）双方未办理结婚登记手续;
（二）双方办理结婚登记手续但确未共同生活，离婚后男方可以主张返还彩礼;
（三）婚前给付并导致给付人生活困难，离婚后男方可以主张返还彩礼。
法律依据：《最高人民关于适用《中华人民共和国民法典》
》婚姻家庭编的解释（一）》第五条，当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民应当予以支持:
（一）双方未办理结婚登记手续;
（二）双方办理结婚登记手续但确未共同生活;
（三）婚前给付并导致给付人生活困难。
适用前款第二项、第三项的规定，应当以双方离婚为条件。