在房地产交易过程中，买方向卖方支付定金之后却又反悔，卖方有权拒绝退回定金。
这是因为定金所具备的担保性质决定了其在合同履行方面的重要性。
依据我国《中华人民共和国民法典》之相关法规，向对方支付定金的一方，如果未能按照约定履行债务或履行债务时存在瑕疵，导致合同目的无法达成，那么他将失去要求对方返还定金的权利。
不过，如果买卖双方在签订合同时已经就毁约行为的具体处理方法进行了明确约定，则应当严格按照约定来执行。
需要特别强调的是，若定金数额已经超过了主合同标的额的20%，那么超出部分便不再构成定金的法律效力。
因此，作为卖方，在处理此类问题时要妥善保存相关证据，如合约文本、定金开具的收据、以及沟通过程中的对话录音等，以备将来可能出现的争议所需。
在此建议买卖双方在处理此类情况时尽量通过友好协商寻求解决方案，若协商未果，卖方可以考虑通过法律途径来维护自己的合法权益。