通常来讲，买房子时的押金能否退还，关键要看具体的合同约定。
倘若合同中清晰地写明了在哪些具体情形下押金可以退还，又在哪些情况下不能退还，那么就应当严格按照合同的约定来执行。
比如说合同约定了如果购房者出现违约行为，那么押金就不予退还。
这时候，购房者就必须仔细地检查自身是否有违约的行为发生。
比如是否按时交付了相关款项、是否按照约定完成了各项手续等。
要是合同没有明确地对押金的退还事宜作出约定，一般情况下，当购房者已经履行完了合同所规定的全部义务，并且不存在任何违约的情形时，押金就应该予以退还。
例如，购房者已经按照约定完成了所有的购房手续，而中介或者卖方没有正当理由就扣留了押金，那么购房者就可以通过协商的方式，要求对方退还押金；如果协商不成，还可以通过法律途径来维护自己的合法权益。
总之，确定买房子的押金是否可以退还，一定要依据具体的合同条款以及实际发生的情况来综合判断。

案情回顾:

小朱通过中介向小李购买房屋，交付了押金。后小朱完成购房手续要求退还押金，小李却以小朱曾有延迟交付部分款项的违约行为为由拒绝退还，双方对是否违约及押金能否退还产生争议，而合同对此有相关约定。

案情分析:

1、若合同明确约定了违约情形下押金不予退还，需核实小朱延迟交付款项行为是否构成合同约定的违约行为。若构成，按合同约定，小李可不退还押金；若不构成，小李应退还押金。
2、若小朱不存在违约行为，而小李无正当理由扣留押金，小朱有权要求退还。若协商不成，小朱可通过法律途径，依据合同及实际情况维护自身权益。