若首付款已经交付，尽管确实有权利终止房屋购买合同，然而，在这种情况下，可能会承担一定程度上的相应违约责任。首付款本质上属于预付款性质，如当事人决定结束购房合同，则首付款可由开发商全数退还。然而，当这一决定出自当事人自身原因并打算取消购购合同时，买方往往须赔偿违约金给开发商作为补偿。

《民法典》第五百八十五条
当事人可以约定一方违约时应当根据违约情况向对方支付一定数额的违约金，也可以约定因违约产生的损失赔偿额的计算方法。
约定的违约金低于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以增加；约定的违约金过分高于造成的损失的，人民法院或者仲裁机构可以根据当事人的请求予以适当减少。
当事人就迟延履行约定违约金的，违约方支付违约金后，还应当履行债务。