结论：去债务人家里讨钱反而被打，打人者的行为是否犯法取决于具体情节和伤害程度，但通常情况下，打人行为是违法的，可能涉及民事、行政及刑事责任。
详细分析：
民事责任：
- 无论打人行为是否构成犯罪，打人者都需要承担民事赔偿责任。这是因为暴力行为侵害了他人的健康权，受害者有权要求打人者赔偿因就医治疗支出的各项费用，如医疗费、误工费、护理费、交通费、营养费等，以及因误工减少的收入。若造成残疾，还需赔偿残疾赔偿金、残疾辅助器具费等额外费用。
行政责任：
- 如果打人行为未达到轻伤标准，但违反了《中华人民共和国治安管理处罚法》，打人者可被处以五日以上十日以下拘留，并处二百元以上五百元以下罚款；情节较轻的，也将面临五日以下拘留或者五百元以下罚款的行政处罚。
刑事责任：
- 如果打人行为导致轻伤及以上后果，则构成故意伤害罪。根据《中华人民共和国刑法》的相关规定，故意伤害他人身体的，将面临三年以下有期徒刑、拘役或者管制的刑罚。若致人重伤，则处三年以上十年以下有期徒刑；致人死亡或者以特别残忍手段致人重伤造成严重残疾的，更是将面临十年以上有期徒刑、无期徒刑甚至死刑的严厉惩罚。
特殊情况考虑：
- 如果在讨债过程中，债务人先动手，您出于自卫而还击，且自卫行为未超过必要限度，那么您的行为可能构成正当防卫，不需要承担法律责任。但需要注意的是，正当防卫的认定需要严格符合法律规定的条件，包括防卫的必要性、适时性、相当性等。
- 如果打人行为是在双方争执过程中发生的，且双方都有过错，那么可能会根据各自的过错程度来分担责任。
建议与指导：
- 在讨债过程中，务必保持冷静和理性，避免采取任何形式的暴力行为。暴力不仅不能解决问题，反而可能让自己陷入法律的困境。
- 如果遇到债务人拒绝还款或采取暴力手段对抗的情况，应立即报警并寻求法律援助。通过合法途径（如协商、调解、诉讼等）来维护自己的权益。
- 在日常生活中，也要增强法律意识，了解自己的权利和义务，避免因为一时冲动而触犯法律。
后续行动建议：
- 如果您是被打的一方，建议立即就医并保留好相关医疗记录作为证据。同时，向警方报案并配合调查，以便依法追究打人者的责任。
- 如果您是打人的一方，且行为已经构成违法或犯罪，建议尽快自首并积极配合调查，争取从轻或减轻处罚。同时，也可以考虑与受害者协商赔偿事宜，以减轻自己的民事责任。
总之，无论在哪种情况下，暴力都不是解决问题的最佳方式。在处理债务纠纷时，我们应该通过合法、和平、理性的方式来解决，以维护双方的合法权益和社会的和谐稳定。如果您有任何法律问题或需要进一步的帮助，请直接向我咨询。