购买房屋时缴纳的定金的确具有可撤回性，然而这需要根据具体情况进行判断。在以下几种特殊情况中，购房者有权要求开发商归还定金：
1.当开发商尚未获得《房地产预售许可证》，也就是说在其未达到法律规定的商品房预售基本条件的前提下，与购房者之间签署的任何关于购房定金的协议均属无效。
依据《中华人民共和国民法典》中的无效合同处理原则，无论双方是否已经签订《认购协议》，亦或是双方是否就定金退还事宜达成共识，开发商都必须无条件地将定金归还给购房者；
2.若开发商虽然未能获取《房地产预售许可证》，但却故意隐瞒关键事实或者提供虚假信息声称已经取得该证书，那么开发商需对这种行为承担缔约过失责任，除了返还购房者的定金之外，还应当赔偿购房者因资金占用产生的利息以及其他相关财产损失；
3.在开发商符合商品房预售法定条件且成功取得《房地产预售许可证》的情况下，如果双方仅约定购房者拒绝签订《商品房买卖合同（预售）》便无法要求退还所交付定金，那么购房者可以以该条款显失公平为由，请求法院或仲裁机构对该条款进行变更或撤销，进而要求开发商退还所支付的定金；
4.若由于开发商方面的原因导致合同无法顺利签订，那么购房者有权要求开发商退还相应的定金。
然而，如果是因为购房者自身的原因，并且开发商在此过程中并未存在任何隐瞒或欺骗行为，仅仅是购房者单方面提出退还定金的要求，那么根据认购书中的退房相关约定，购房者可能需要支付违约金。

《民法典》第五百八十六条
当事人可以约定一方向对方给付定金作为债权的担保。定金合同自实际交付定金时成立。
定金的数额由当事人约定；但是，不得超过主合同标的额的百分之二十，超过部分不产生定金的效力。实际交付的定金数额多于或者少于约定数额的，视为变更约定的定金数额。
第五百八十七条
债务人履行债务的，定金应当抵作价款或者收回。给付定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，无权请求返还定金；收受定金的一方不履行债务或者履行债务不符合约定，致使不能实现合同目的的，应当双倍返还定金。