确实如此。
独家委托协议可在权利人任意时刻予以解除，此举意指委托合同的任意一方可充分行使其任意解除权。
然而，不可忽视的一点在于，若因解除合同而为对象方带来损失，那么受托人将无法规避赔偿责任。

《民法典》第五百六十二条
当事人协商一致，可以解除合同。当事人可以约定一方解除合同的事由。解除合同的事由发生时，解除权人可以解除合同。
第五百六十六条合同解除后，尚未履行的，终止履行；
已经履行的，根据履行情况和合同性质，当事人可以请求恢复原状或者采取其他补救措施，并有权请求赔偿损失。
合同因违约解除的，解除权人可以请求违约方承担违约责任，但是当事人另有约定的除外。
主合同解除后，担保人对债务人应当承担的民事责任仍应当承担担保责任，但是担保合同另有约定的除外。