首先，根据《中华人民共和国民法典》的相关规定，中介人促成合同成立的，委托人应当按照约定支付报酬。这意味着，如果中介成功促成了房屋买卖合同的成立，那么买方或卖方通常需要按照约定支付中介费。在一般情况下，一旦合同成立，中介费是不会退还的，因为中介已经完成了其服务，即促成了合同的成立。

然而，也存在一些特定情况，中介费可能会退还或者不需要支付。例如，如果中介人未促成合同成立的，那么中介就无权要求支付报酬，但可以要求委托人支付其从事中介活动支出的必要费用。此外，如果中介人在促成合同的过程中存在欺诈行为，如故意隐瞒或提供虚假情况，导致委托人利益受损，那么中介不仅不能要求支付报酬，还需要承担赔偿责任。

具体到房产中介的情况，如果购房者在签订购房合同后，因为某些原因（如个人原因、政策变化等）不想继续购买房屋，想要退回中介费，这通常是比较困难的。因为中介已经完成了其服务，即促成了购房合同的成立。除非购房合同中有特别约定，或者中介存在欺诈行为，否则中介费一般是不会退还的。

此外，还需要注意的是，购房者在签订购房合同前，通常会支付一定的定金作为签订正式合同的担保。这种定金与中介费不同，其性质是立约定金。如果因购房者原因导致没有签订正式的商品房买卖合同，那么定金通常也是不会退还的。这与中介费是否退还并无直接关系。

综上所述，房产中介一签合同就不退中介费的情况并非绝对，而是需要根据具体情况进行分析。如果中介成功促成了合同的成立，且合同合法有效，那么中介费通常是不会退还的。但如果存在特定情况，如中介未促成合同成立或存在欺诈行为等，那么中介费可能会退还或者不需要支付。

法律依据

《中华人民共和国民法典》第九百六十三条 【中介人报酬请求权】中介人促成合同成立的，委托人应当按照约定支付报酬。对中介人的报酬没有约定或者约定不明确，依据本法第五百一十条的规定仍不能确定的，根据中介人的劳务合理确定。因中介人提供订立合同的媒介服务而促成合同成立的，由该合同的当事人平均负担中介人的报酬。
中介人促成合同成立的，中介活动的费用，由中介人负担。

《《最高人民法院关于审理技术合同纠纷案件适用法律若干问题的解释》》第四十条 中介人未促成委托人与第三人之间的技术合同成立的，其要求支付报酬的请求，人民法院不予支持；其要求委托人支付其从事中介活动必要费用的请求，应当予以支持，但当事人另有约定的除外。 中介人隐瞒与订立技术合同有关的重要事实或者提供虚假情况，侵害委托人利益的，应当根据情况免收报酬并承担赔偿责任。