在下列情况下，购买房屋的业主有权要求退还房屋：
首先是购房合同本身被证实为非法。
其次，由于房屋的大小与原定不符，需要进行退房处理。
第三种情况是，房屋的实际面积与合同约定的面积存在差异，这也可能导致退房。
此外，如果房屋的规划和设计发生了重大变化，也可能引发退房请求。
最后，如果房屋的质量无法达到标准，同样可以作为退房的理由。

《商品房买卖合同纠纷解释》第十四条出卖人交付使用的房屋套内建筑面积或者建筑面积与商品房买卖合同约定面积不符，合同有约定的，按照约定处理；合同没有约定或者约定不明确的，按照以下原则处理：1、面积误差比绝对值在3%以内(含3%)，按照合同约定的价格据实结算，买受人请求解除合同的，不予支持；2、面积误差比绝对值超出3%，买受人请求解除合同、返还已付购房款及利息的，应予支持。