在某些特定的情况之下，购买房屋的业主有权请求退回房屋，且无需承担交纳违约金的义务。比如，如果房地产开发商未能依照合同所规定的期限交付房屋，或者该房屋存在着严重的质量瑕疵问题，那么购买房屋的业主便可依据法律的规定，请求解除购房合同，同时向开发商索要已经支付的房款以及相应的利息。除此之外，倘若房地产开发商在销售的过程中存在着欺诈行为，那么购买房屋的业主同样可以根据法律的规定，请求撤销购房合同，并且要求开发商进行赔偿，以弥补其因此遭受的经济损失。

《中华人民共和国民法典》第五百六十三条
有下列情形之一的，当事人可以解除合同：
（一）因不可抗力致使不能实现合同目的；
（二）在履行期限届满前，当事人一方明确表示或者以自己的行为表明不履行主要债务；
（三）当事人一方迟延履行主要债务，经催告后在合理期限内仍未履行；
（四）当事人一方迟延履行债务或者有其他违约行为致使不能实现合同目的；
（五）法律规定的其他情形。
以持续履行的债务为内容的不定期合同，当事人可以随时解除合同，但是应当在合理期限之前通知对方。