能退。
但是对否需要支付违约金应当视以下情况而定：
1、如果是银行原因，比如额度紧张无法放款，那么购房者可以和卖家协商解除购房合同，并且不必承担违约责任，卖家应该无条件退还购房首付。
2、如果是因为购房者自身原因，比如征信记录有污点或者还款能力不够而影响贷款审批。

《民法典》第三百九十四条
为担保债务的履行，债务人或者第三人不转移财产的占有，将该财产抵押给债权人的，债务人不履行到期债务或者发生当事人约定的实现抵押权的情形，债权人有权就该财产优先受偿。前款规定的债务人或者第三人为抵押人，债权人为抵押权人，提供担保的财产为抵押财产。