首付已付40万，若是开发商的责任，导致购房者退房的，退房者无需支付退房违约金，可以要求开发商赔偿。主要有一下几种情况：
1、延期交付房屋到了开发商与购房人在合同中约定的交房日后，却迟迟得不到开发商的入住通知。
2、开发商开发手续不全导致合同无效。
3、开发商未经购房人同意擅自变更设计。4、房屋面积误差超过3%。
5、房屋质量不合格导致严重影响使用。
6、房子产权不清楚，如存在抵押、联建或其他经济纠纷。13、迟延办理房屋所有权登记购房者因为自己的原因，主动要求退房，就要赔付开发商退房违约金，若退房违约金写进购房合同，就按购房合同处理，若没有，则协商解决。

《中华人民共和国民法典》第五百八十五条当事人可以约定一方违约时应当根据违约情况向对方支付一定数额的违约金，也可以约定因违约产生的损失赔偿额的计算方法。
约定的违约金低于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以增加；约定的违约金过分高于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以适当减少。
当事人就迟延履行约定违约金的，违约方支付违约金后，还应当履行债务。