男女离婚时候是否要退回彩礼，还需要看实际的情况是否构成了彩礼返还的条件，如果构成了彩礼返还的条件，可以依法要求退回。可以要求返还彩礼的情形包括3种：1、给付彩礼后悔婚，双方未办理结婚登记的；2、双方即使已经办理结婚登记手续，但确未共同生活过就离婚的。3、婚前给付彩礼导致给付人生活困难，离婚时也可以此为由要求返还彩礼。法律依据。《中华人民共和国民法典》。第一千零七十六条 夫妻双方自愿离婚的，应当签订书面离婚协议，并亲自到婚姻登记机关申请离婚登记。离婚协议应当载明双方自愿离婚的意思表示和对子女抚养、财产以及债务处理等事项协商一致的意见。第一千零七十九条 夫妻一方要求离婚的，可以由有关组织进行调解或者直接向人民法院提起离婚诉讼。