依法禁止如此操作。
法律明确阐明，探望权乃是父母双方离婚后，未亲身抚养孩子的那一方所享有的关怀照料孩子的权益保障，这是他们在离异之后，不是作为孩子的直接抚养者而享有与未成年子女保持必要接触、见面以及交流等方面的权利。
由于只存在探视权而无监护权之实，故，该方未能独自携带孩子返家居住。
然而，必须充分考虑并尊重孩子自身的意愿和感受。

《中华人民共和国民法典》第一千零八十六条
离婚后，不直接抚养子女的父或者母，有探望子女的权利，另一方有协助的义务。行使探望权利的方式、时间由当事人协议；协议不成的，由人民法院判决。父或者母探望子女，不利于子女身心健康的，由人民法院依法中止探望；中止的事由消失后，应当恢复探望。