关于解除中介购买房产协议并退还定金的问题，需要根据实际情形进行判断与处理。
倘若因不可抗力或者双方都无法控制的因素，例如政策调整导致本来具备购房资格的买家失去了该资格，那么在这种情况下，定金是应该被退还给买方的。
然而，如果是由于中介机构或者卖家存在违反合同约定的行为，例如故意隐瞒房屋的重要缺陷、做出不实的承诺等等，从而使得合同的主要目的无法达成，那么作为买方，您有权利解除这份合同并且要求返还定金，甚至可以进一步提出违约赔偿的请求。
但是，如果是因为您自己的原因，例如改变主意不再愿意继续履行合同，那么定金很可能就无法予以退还。
因此，我们强烈建议您首先对合同中的各项条款进行详尽审查，明确双方各自的权利与义务以及违约的具体情形。
同时，也应当积极搜集相关的证据，例如与中介机构或者卖家的沟通过程中留下的记录、他们违反规定的行为证据等等。
接下来，您可以尝试与中介机构和卖家进行友好协商以寻求解决方案，如果协商无果，您还可以向当地法院提交诉讼申请，借助法律的力量来保护您的合法权益不受侵害。