结论：在对方欠你钱的情况下，你不让他走可能构成违法，具体取决于行为的性质和严重程度。
分析如下：
可能构成非法拘禁罪：
- 根据《中华人民共和国刑法》第二百三十八条的规定，非法拘禁他人或者以其他方法非法剥夺他人人身自由的，将受到法律的严惩，处三年以下有期徒刑、拘役、管制或者剥夺政治权利。若你采取强制措施限制债务人的人身自由，比如将其锁在房间内不允许其离开，且持续时间较长（一般认为非法剥夺他人人身自由超过24小时），或者虽未达到24小时但伴有殴打、侮辱等情节的，将从重处罚。这种行为即可能构成非法拘禁罪。
可能违反《治安管理处罚法》：
- 即便你的行为未达到非法拘禁罪的程度，但只要存在限制他人人身自由的行为，也可能违反《治安管理处罚法》。根据该法第四十条的规定，非法限制他人人身自由的，将处十日以上十五日以下拘留，并处五百元以上一千元以下罚款；情节较轻的，处五日以上十日以下拘留，并处二百元以上五百元以下罚款。例如，你拉扯债务人，短暂阻拦其离开，虽然时间较短，但也属于非法限制他人人身自由的违法行为，将会面临治安处罚。
合法解决途径：
- 协商：首先，你可以尝试与债务人进行友好协商，寻求双方都能接受的还款方式和期限。
- 调解：如果协商无果，你可以考虑在第三方的主持下，通过调解达成和解协议。
- 诉讼：若调解也未能解决问题，你可以向人民法院提起诉讼，通过司法程序来维护自己的合法权益。在提起诉讼前，确保你已经收集好了相关证据，如借条、转账记录等，以支持你的诉求。
- 申请支付令或保全措施：在情况紧急，不立即申请保全将会使合法权益受到难以弥补的损害时，你还可以在提起诉讼或申请仲裁前，向被保全财产所在地、被申请人住所地或对案件有管辖权的人民法院申请采取保全措施。若法院判决后对方仍不履行，可进一步申请强制执行等程序来实现债权。
特别提醒：
- 在处理债务纠纷时，务必保持冷静和理智，避免采取过激或非法的行为。
- 限制他人人身自由不仅可能触犯法律，还可能对双方的关系造成不可挽回的损害。
- 坚持通过合法途径解决纠纷，是保护自己权益的同时，也是对法律的尊重与遵守。
如果你在处理债务纠纷过程中遇到任何法律问题或困惑，可以直接向我咨询，我会根据你的具体情况提供专业的法律建议。