居住权是一种用益物权，一旦在不动产登记机构完成了登记，就正式设立，对房屋所有权人产生法律约束力。这意味着，在居住权有效期内，房主不能随意赶走居住权人，也不能单方面取消这个权利。居住权具有排他性，即使房主把房子卖掉，新房主也必须继续履行原有的居住权合同，不能干涉居住权人的正常生活。
虽然居住权设立后比较稳固，但并不代表它是永久不可撤销的。在特定条件下，居住权是可以被取消或自然消灭的。最常见的情况是居住权期限届满，或者居住权人死亡，这时候权利自动消灭，房主可以收回房屋。此外，居住权人书面声明放弃权利，或者双方协商一致解除合同，也可以办理注销登记，从而取消居住权。
除了自然消灭，法律还规定了其他可以取消居住权的情形。如当设立居住权的房屋因为自然灾害等原因灭失，权利失去了依附的载体，居住权也会随之消灭。居住权人严重违反合同约定，比如擅自将房屋出租、转让居住权，或者对房屋造成重大损害，房主可以通过法律途径解除合同，进而申请取消居住权。
还有一种情况是权利混同，即房主和居住权人变成了同一个人，比如居住权人通过合法方式买下了这套房子，那么居住权就因为没有存在的必要而自动消灭。另外，居住权是通过恶意串通设立的，目的是为了逃避债务或损害第三人利益，这种设立行为本身就是无效的，可以通过法院判决予以撤销，从而取消居住权。
对于房屋所有权人来说，设立居住权最大的弊端在于严重限制了房屋的处分权。一旦房子上设立了居住权，房子的市场价值会大打折扣。潜在的买家看到房产登记上有居住权记录，通常会望而却步，因为买了房子也无法立即入住，必须等到居住权期限届满。这导致房主在急需资金周转需要卖房时，面临极大的困难，甚至可能因为无法变现而陷入困境。
居住权还会导致房主失去对房屋的实际控制和使用。在居住权存续期间，房主虽然名义上拥有产权，但无法进入房屋居住，也无法行使占有和使用的权利。如果居住权人居住期间对房屋疏于管理，甚至进行破坏性装修，房主想要干预会非常被动。这种所有权与使用权的长期分离，让房主处于一种有房不能住的尴尬境地。
居住权还具有一定的法律风险，容易被恶意利用来对抗执行。有些债务人为了逃避债务，会在房屋被法院查封或执行前，突击为亲属设立长期的居住权。这种行为虽然可能被法院认定为无效并涤除，但会大大增加债权人的维权成本和执行难度。对于不知情的买家来说，如果买到了带有居住权的房子，更是会面临钱房两空的巨大风险。
此外，居住权原则上是无偿设立的，这意味着房主无法从居住权人那里获得经济收益。与租赁不同，租赁是有偿的债权关系，而居住权更多体现为保障性质。房主让渡了房屋的占有和使用权，却拿不到租金，还要承担房屋的折旧损耗。双方没有明确约定房屋的修缮义务，未来房屋出现质量问题，维修费用的承担也容易引发纠纷，给房主带来额外的经济负担。