您提出的这种情况是难以实现的。
在签订房屋租赁合同之后，即使您尚未实际入住，但由于中介公司已成功地提供了其所需的居间服务，所以，您是不能够享有退回部分或全部中介费用的权利的。
在此种情况下，我们必须看到，居间合同已然正式签署成为有效合同。
一旦居间人为促成该合同而付出努力，那么卖家就理应按照约定给予居间商相应的酬劳。
而且，当事人有自主选择，可以协商约定，当有一方向另一方违约时，需依据具体违约情形向对方支付一定额定的违约金。
此外，他们同样也能够约定，对于因违约行为所导致的实际损失赔偿金额应当如何进行合理计算。

《中华人民共和国民法典》第五百八十五条当事人可以约定一方违约时应当根据违约情况向对方支付一定数额的违约金，也可以约定因违约产生的损失赔偿额的计算方法。约定的违约金低于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以增加；约定的违约金过分高于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以适当减少。当事人就迟延履行约定违约金的，违约方支付违约金后，还应当履行债务。