屋主是否有权赶人走，这并非一个简单的是非问题，而是需要根据具体情况来综合判断。以下是我从不同角度为您进行的分析：

1. 产权人的基本权利与限制

   • 基本权利：作为房屋的产权人，您依法享有对房屋的占有、使用、收益和处分的权利。如果居住在房屋内的人（如租客、未经许可的居住者）的行为严重妨碍了您正常行使这些权利，例如未经许可的大规模破坏或长期恶意拖欠租金，您在合理通知并给予宽限期后，确实有权要求他们搬离。
   • 法律限制：然而，这种权利并非绝对。如果居住者是您的家人，并且存在特定的法律关系（如监护关系、婚姻关系、赡养关系等），您的权利就会受到一定的限制。例如，若家人中有未成年人，且您是其监护人，基于监护职责，您在未成年人成年前不能随意要求其搬离，以确保未成年人的稳定居住环境。同样，配偶间即使房屋属于一方个人财产，在婚姻关系存续期间，另一方也享有一定的居住权益。

2. 居住权人的合法权益

   • 如果居住在房屋内的人是通过合法途径（如签订租赁合同、设立居住权等）获得居住权的，那么他们就享有对房屋的使用权，这种使用权受法律保护。在这种情况下，您不能随意要求他们搬离，除非存在法定情形（如严重违反租赁合同、居住权消灭等）。

3. 纠纷处理方式

   • 协商沟通：在处理此类纠纷时，我建议您首先尝试与居住者进行协商沟通，理解对方的诉求和困难，寻求双方都能接受的解决方案。这不仅可以避免不必要的法律纠纷，还可以维护双方的关系和谐。
   • 第三方调解：如果协商不成，您可以考虑寻求居委会、人民调解委员会等第三方机构进行调解。这些机构通常具有丰富的调解经验和专业知识，可以帮助您和居住者达成和解协议。
   • 法律途径：当上述方式均无法解决问题时，您可以向法院提起诉讼。法院将依据具体情况和法律规定作出公正裁决。在诉讼过程中，您需要提供充分的证据来支持自己的主张，并遵守法院的诉讼程序和规定。

总结与建议：

• 在处理屋主是否有权赶人走的问题时，您需要综合考虑多种因素，包括产权人的基本权利与限制、居住权人的合法权益以及纠纷处理方式等。
• 我建议您在采取任何行动之前，先了解清楚居住者的身份和法律关系，以及他们是否享有合法的居住权。
• 如果您对具体情况存在疑问或不确定如何处理，可以直接向我咨询。作为专业律师，我将根据您的具体情况提供有针对性的法律建议和帮助。