首先需要明确的是，购房者的首付款是完全具备可撤回性的。如果购房者与销售方之间经过详尽商讨后达成了解除购房协议的共识，并就首付款的退还事宜达成一致，那么这笔款项理应被予以返还。然而，若是在购房协议中并未附加设置解约权，那么便不允许任意单方面撤消该协议。在这种情况下，对方有权提出继续履行原先的条款或者要求您支付相应的违约金，进而决定首付款是否应当被撤回，这在此需依照相关的购房合同条款来做出裁决。

《民法典》第五百六十二条
当事人协商一致，可以解除合同。
当事人可以约定一方解除合同的事由。解除合同的事由发生时，解除权人可以解除合同。
《民法典》第五百六十三条
有下列情形之一的，当事人可以解除合同：
(一)因不可抗力致使不能实现合同目的;
(二)在履行期限届满前，当事人一方明确表示或者以自己的行为表明不履行主要债务;
(三)当事人一方迟延履行主要债务，经催告后在合理期限内仍未履行;
(四)当事人一方迟延履行债务或者有其他违约行为致使不能实现合同目的;
(五)法律规定的其他情形。
以持续履行的债务为内容的不定期合同，当事人可以随时解除合同，但是应当在合理期限之前通知对方。