结论前置：是否可以随时把别人撵出自己的房屋，这并非一个简单的是非问题，而是需要根据具体情况来判断。以下我将从多个角度为您详细分析。

1. 房屋所有权与使用权：

   • 如果您是房屋的合法所有者，且对方没有合法的居住权或租赁权，那么您在大多数情况下有权要求对方离开。但即便如此，也建议通过合法途径，如协商、调解或法律程序来解决问题，以避免不必要的纠纷。
   • 如果对方拥有合法的居住权或租赁权，比如通过租赁合同获得了房屋的使用权，那么您就不能随意撵走对方。在这种情况下，您需要遵循合同条款和相关法律规定，通过合法途径来解除合同或要求对方履行合同义务。

2. 家庭关系与共同居住：

   • 如果对方是您的家庭成员，如配偶、子女或父母，且你们共同居住在该房屋中，那么情况就更为复杂。在这种情况下，即使您是房屋的所有者，也不能随意撵走对方，因为家庭关系涉及到更多的情感和法律义务。
   • 对于家庭成员之间的居住问题，建议通过家庭内部的协商和调解来解决。如果无法达成一致，可以寻求法律援助或咨询专业律师，以了解具体的法律权益和解决方案。

3. 法律程序与强制执行：

   • 如果您决定通过法律途径来解决问题，比如起诉对方非法占用房屋或违反租赁合同，那么您需要遵循相关的法律程序。这通常包括向法院提起诉讼、提供证据、参加庭审等步骤。
   • 如果法院最终判决对方需要离开房屋，但对方仍然拒绝执行，那么您可以申请法院进行强制执行。但强制执行也需要遵循法律程序，并且可能会涉及到一定的时间和费用。

4. 特殊情况与例外：

   • 在某些特殊情况下，比如对方存在暴力行为、威胁您的安全或破坏房屋等，您可能有权立即要求对方离开，并寻求警方的帮助。
   • 此外，如果房屋存在安全隐患或需要紧急维修等情况，您也可能需要暂时要求对方离开以确保安全。但在这些情况下，也建议尽快与对方沟通并寻求合法解决方案。

法律建议：

• 在处理此类问题时，建议保持冷静和理性，避免采取过激行为或言语冲突。
• 尽可能通过协商和调解来解决问题，以减少不必要的法律纠纷和成本。
• 如果无法达成一致或对方拒绝配合，可以寻求法律援助或咨询专业律师，以了解具体的法律权益和解决方案。

可能后果：

• 如果您随意撵走对方且没有合法依据，可能会面临对方的法律诉讼或索赔要求。
• 如果您通过合法途径解决问题但处理不当，也可能会引发不必要的纠纷和损失。

总之，是否可以随时把别人撵出自己的房屋需要根据具体情况来判断。在处理此类问题时，请务必遵循相关法律法规和程序要求，并寻求专业律师的帮助以确保您的权益得到妥善保护。如果您有任何疑问或需要进一步的法律咨询，请随时向我提问。