别人差我钱，我带人去他家是否犯法，需根据具体情况来判断。以下是对此问题的详细分析：
合法情况：
- 当双方存在合法的债权债务关系时，你有权要求对方履行还款义务。
- 在此情况下，如果你带领少量人员前往对方家里，以平和、理性的方式催告还款，且未采取任何暴力、威胁、侮辱、诽谤等不当行为，也未影响对方及其家人的正常生活秩序，那么这种行为通常不构成违法。
违法情况：
- 非法侵入住宅罪：如果未经对方同意，强行闯入其住宅进行讨债，即使目的是要钱，也可能构成非法侵入住宅罪。此行为侵犯了他人的住宅安宁权，依据《中华人民共和国刑法》的相关规定，可能会受到刑事处罚。
- 抢劫罪：若在讨债过程中使用暴力、胁迫等手段，当场夺取或迫使对方交出财物，将构成抢劫罪。此类行为严重侵犯了公民的人身权利和财产权利，将受到严厉的刑事处罚。
- 敲诈勒索罪：以非法占有为目的，通过威胁、要挟等方法向对方索要财物，且数额较大或多次敲诈勒索的，可能构成敲诈勒索罪。例如，声称不给钱就散布虚假负面信息损害对方名誉的行为，也将受到法律的制裁。
- 寻衅滋事罪：若采取了滋扰、恐吓等手段，扰乱社会秩序，影响他人的正常生活和工作，情节严重的也可能构成寻衅滋事罪，并受到相应的法律制裁。
因此，在讨债过程中，务必遵守法律法规，以合法、理性的方式解决问题。如果对方确实存在欠款行为，建议通过法律途径如起诉、调解等方式来维护自己的合法权益，而不是采取过激或违法的手段。如果你有任何疑问或需要进一步的法律帮助，请直接向我咨询。