结论：差别人钱不给，去撤对方东西的行为是否犯法，需根据具体情况判断，一般情况下可能构成违法行为，甚至犯罪。以下从不同角度详细分析：
一、可能构成犯罪的情况
盗窃罪：
- 如果未经对方同意，私自进入对方住所或经营场所，撤走其财物，且数额较大或存在多次盗窃等情节，可能构成盗窃罪。
- 根据《中华人民共和国刑法》第二百六十四条，盗窃公私财物，数额较大的，或者多次盗窃、入户盗窃、携带凶器盗窃、扒窃的，处三年以下有期徒刑、拘役或者管制，并处或者单处罚金；数额巨大或者有其他严重情节的，处三年以上十年以下有期徒刑，并处罚金；数额特别巨大或者有其他特别严重情节的，处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产。
抢劫罪（极端情况）：
- 如果在撤东西的过程中，使用暴力、胁迫或其他方法强行夺取财物，可能构成抢劫罪。但这种情况较为极端，且需要满足特定的法律条件。
二、不构成犯罪但可能违法的情况
非法侵入住宅罪或非法搜查罪（如涉及）：
- 如果未经对方同意，私自进入其住宅或经营场所撤东西，即使未构成盗窃罪，也可能因非法侵入住宅或非法搜查而违法。
- 根据《中华人民共和国刑法》的相关规定，非法侵入他人住宅的，处三年以下有期徒刑或者拘役；非法搜查他人身体、住宅的，处三年以下有期徒刑或者拘役。
民事纠纷与侵权：
- 如果撤东西的行为未达到刑事犯罪的程度，但侵犯了对方的财产权或其他合法权益，可能构成民事侵权。
- 在这种情况下，对方可以通过民事诉讼途径来维护自己的权益，要求你返还财物并赔偿损失。
三、合法途径解决债务纠纷的建议
协商：
- 首先尝试与对方进行友好协商，寻求达成和解协议，如分期还款、延期还款等。
调解：
- 如果协商无果，可以寻求第三方调解机构的帮助，如人民调解委员会、行业调解组织等，通过调解方式解决纠纷。
诉讼：
- 如果调解也无法解决问题，可以向人民法院提起诉讼，通过法律途径解决债务纠纷。在诉讼过程中，需要提供充分的证据证明对方欠款的事实和金额。
举例说明：假设你因生意往来欠对方10万元，因资金周转困难未能按时还款。对方在未经你同意的情况下，私自进入你的仓库撤走了价值相当的货物。这种情况下，对方的行为可能构成盗窃罪，因为其未经允许撤走了你的财物。而你则应通过合法途径解决债务纠纷，如协商、调解或诉讼等。
后续行动建议：如果你面临类似情况，建议立即停止任何可能违法的行为，并通过合法途径解决债务纠纷。如果你不确定自己的行为是否合法或如何维护自己的权益，可以直接向我咨询，我会根据你的具体情况提供专业的法律建议。