结论前置：针对您描述的情况，您可以通过民事诉讼的方式要求对方搬离并承担相应责任，具体可从以下方面着手：

1. 明确法律关系与诉求

   • 您与对方之间原本是房屋租赁合同关系，对方将租赁房屋用于居住老人且拒不搬离的行为，已违反了租赁用途的约定（若合同中有明确用途限制），构成违约。
   • 您的核心诉求应是要求对方立即搬离房屋，并可根据实际情况主张因对方违约给您造成的损失赔偿，如租金损失、因房屋被占用导致您无法另行出租的损失等。

2. 收集证据

   • 租赁合同：这是证明您与对方存在租赁关系以及约定租赁用途、期限、租金等关键条款的重要证据。
   • 沟通记录：包括您与对方就搬离事宜进行的协商、沟通的短信、微信、邮件等记录，可证明您已多次要求对方搬离而对方拒绝。
   • 现场照片或视频：拍摄房屋内老人居住的现状，以直观展示对方未按约定用途使用房屋且拒不搬离的事实。
   • 其他证人证言：如有邻居、物业工作人员等知晓此事，可请他们出具证人证言，证明对方占用房屋且拒不搬离的情况。

3. 确定管辖法院与起诉

   • 根据《中华人民共和国民事诉讼法》的规定，因合同纠纷提起的诉讼，由被告住所地或者合同履行地人民法院管辖。在房屋租赁合同纠纷中，合同履行地通常为房屋所在地，因此您可向房屋所在地的人民法院提起诉讼。
   • 起草起诉状，明确原告（您）、被告（对方）的基本信息、诉讼请求（要求对方搬离房屋、赔偿损失等）、事实与理由（阐述租赁关系、对方违约事实、您已多次要求搬离而对方拒绝等），并附上相关证据材料，向法院提交起诉。

4. 参与诉讼过程

   • 法院受理案件后，会安排开庭审理。在庭审过程中，您需按照法官的指引进行陈述、举证、质证等，以证明您的主张。
   • 对方可能会进行答辩或提出反诉，您需针对对方的观点进行反驳或应对。

5. 执行判决

   • 若法院判决支持您的诉讼请求，即要求对方搬离房屋并赔偿损失，但对方仍拒不履行，您可向法院申请强制执行。法院会采取相应的强制措施，如强制迁出房屋、查封、扣押、拍卖对方财产等，以保障您的合法权益。

特殊情况说明：若您与对方在租赁合同中未明确约定租赁用途，或约定不明确，此时对方将房屋用于居住老人可能不构成违约。但即便如此，若租赁期限已届满，您仍有权要求对方搬离房屋。若租赁期限未届满，您可与对方协商解除租赁合同，若协商不成，您可能需依据《中华人民共和国民法典》中关于合同解除的相关规定，证明存在法定解除事由（如对方严重违反租赁房屋的使用规定等），以解除租赁合同并要求对方搬离。