你好，首先你们不存在离婚的问题，因为你们没有登记结婚并领取结婚证，所以并不是被法律承认的婚姻关系，鉴于你们根本不是夫妻，无论你们双方谁向人民法院提出离婚诉讼均不予受理，民政机关也不会发放离婚证，男女双方谁先提出分手和退彩礼没有任何直接联系。
就算是男方提出分手也一样可以要求退还彩礼:
《婚姻法解释二》第十条当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持:
(一)双方未办理结婚登记手续的
所以，因为你们没有领取结婚证所以彩礼应当返还。