不退彩礼是不可以起诉媒人的，媒人是为男女双方进行婚姻介绍的职业或者行为，媒人只提供双方中介服务，不对婚姻的成立承担责任。

【法律依据】

《婚姻法司法解释二》第十条规定，当事人请求返还按照习俗给付的彩礼的，如果查明属于以下情形，人民法院应当予以支持：

(一)双方未办理结婚登记手续的；

(二)双方办理结婚登记手续但确未共同生活的；

(三)婚前给付并导致给付人生活困难的。

适用前款第(二)、(三)项的规定，应当以双方离婚为条件。