不退彩礼钱一般不违法，但如果男方起诉要求女方退还彩礼，在判决要求女方退还彩礼后女方还拒不退还的，则就是违法的；如果情节严重的，还会构成犯罪。
彩礼返还的情形如下：
1、双方只是出于恋爱阶段，并没有到民政局办理结婚登记手续，此时如果结不成婚，给付彩礼的一方有权要求返还；
2、双方已经办理结婚登记手续但是并没共同居住、共同生活，这种情况下离婚，给付彩礼的一方则可以要求返还；
3、需要给付的彩礼金额很大，导致给付人生活困难。在这种情况下，即使结婚了有一段时间了，但是由于彩礼导致债台高筑，此时离婚了也是可以向请求对方返还彩礼的。
法律依据：《最高人民关于适用<中华人民共和国民法典>婚姻家庭编的解释（一）》 第五条
当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民应当予以支持：
（一）双方未办理结婚登记手续；
（二）双方办理结婚登记手续但确未共同生活；
（三）婚前给付并导致给付人生活困难。
适用前款第二项、第三项的规定，应当以双方离婚为条件。