设定居住权的房屋，产权人不能赶走居住权人。居住权人对他人所有的住宅享有占有、使用、收益的权利。也就是说，这个居住权人，虽没有房屋的所有权，但可以合法居住在房子里，对房屋所有权人的权利有一定的限制。因此，在房屋买卖时，特别是在二手房买卖交易时，要事先调查清楚房屋是否有居住权，否则，即使买了房子，也无法把居住权人赶走。

《民法典》第三百六十六条
居住权人有权按照合同约定，对他人的住宅享有占有、使用的用益物权，以满足生活居住的需要。