需要根据合同具体内容判断。
房屋出租时，出租人可以与承租人约定收取房屋租赁合同保证金，房屋出租时，出租人可以与承租人约定收取房屋租赁保证金。
一般来说是在双方都基本履行完毕合同内容后退还的。
当然，如果有约定具体的退还情况和退还时间的话，那么就按约定的为准。

《民法典》
第四百九十条
当事人采用合同书形式订立合同的，自当事人均签名、盖章或者按指印时合同成立。在签名、盖章或者按指印之前，当事人一方已经履行主要义务，对方接受时，该合同成立。法律、行政法规规定或者当事人约定合同应当采用书面形式订立，当事人未采用书面形式但是一方已经履行主要义务，对方接受时，该合同成立。