物业部门并无权擅自调离住户的电源适配器，因为此类行为已构成了非法侵占他人财产的违法行为。
然而，若该电源适配器存在严重的安全隐患，例如已经损坏、老化或者电线外露等情况，那么物业部门则有权力采取必要的措施以确保住户的人身和财产安全，在这种情况下，他们可以暂时将电源适配器移除，并及时通知住户进行更换或维修处理。

《物业管理条例》第四十五条
对物业管理区域内违反有关治安、环保、物业装饰装修和使用等方面法律、法规规定的行为，物业服务企业应当制止，并及时向有关行政管理部门报告。有关行政管理部门在接到物业服务企业的报告后，应当依法对违法行为予以制止或者依法处理。
第五十条
业主、物业服务企业不得擅自占用、挖掘物业管理区域内的道路、场地，损害业主的共同利益。因维修物业或者公共利益，业主确需临时占用、挖掘道路、场地的，应当征得业主委员会和物业服务企业的同意；物业服务企业确需临时占用、挖掘道路、场地的，应当征得业主委员会的同意。业主、物业服务企业应当将临时占用、挖掘的道路、场地，在约定期限内恢复原状。