口头协议在一定程度上是具有法律效力的，然而在实际的操作过程中，要去举证它却比较困难。
假如遇到中介不愿意退还中介费的情况，首先你应该主动与中介进行沟通。
明确地向中介传达，根据你们之间的口头协议，他们是应当退还中介费的，并且要妥善地保存好这些沟通的记录，这将成为后续维权的重要证据。
如果经过沟通还是没有效果，那么你就可以向消费者协会或者相关的行业监管部门进行投诉。
详细地向他们反映中介拒绝退费的具体情况，请求他们介入并进行调解。
倘若仍然无法解决问题，此时你就可以考虑通过诉讼的途径来解决。
在这之前，一定要准备好相关的证据，像聊天记录、通话录音等这些能够证明存在口头协议的材料。
然后带着这些证据向法院提起诉讼，要求中介退还中介费。
在诉讼的过程中，一定要特别注意诉讼时效等相关的法律规定，确保自己的权益能够得到有效的维护。