若打人者并非主人指使，那么责任应由打人者自行承担，主人一般无需承担直接责任，但需根据具体情况判断是否存在其他责任。以下从不同角度进行详细分析：
一、打人者自行承担责任
直接责任：
- 根据《中华人民共和国民法典》的相关规定，行为人因过错侵害他人民事权益造成损害的，应当承担侵权责任。因此，如果打人者并非受主人指使，而是出于个人原因或情绪失控等行为导致他人受伤，那么打人者应当自行承担侵权责任，包括赔偿受害人的医疗费、误工费、护理费等损失。
刑事责任：
- 如果打人者的行为构成犯罪，如故意伤害罪等，那么打人者还将面临刑事责任的追究。根据《中华人民共和国刑法》的相关规定，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制；致人重伤的，处三年以上十年以下有期徒刑；致人死亡或者以特别残忍手段致人重伤造成严重残疾的，处十年以上有期徒刑、无期徒刑或者死刑。
二、主人可能承担的责任
管理责任：
- 如果主人对打人者负有管理责任，如打人者是主人的雇员或受主人委托从事某项活动，且打人行为发生在执行职务过程中，那么主人可能因管理不善或选任不当而承担一定的责任。但这种情况需要具体分析，且主人承担的责任通常是次要的或补充的。
共同侵权责任：
- 如果主人与打人者存在共同故意或共同过失，导致他人受伤，那么主人和打人者可能构成共同侵权，需要共同承担责任。但这种情况需要明确的证据证明主人与打人者之间存在共同的意思联络或行为关联。
三、法律建议
收集证据：
- 对于受害人而言，应及时收集相关证据，如现场照片、视频、证人证言等，以证明打人者的行为和造成的损害后果。这些证据将有助于受害人向打人者主张权利。
报警处理：
- 如果打人行为构成犯罪或情节严重，受害人应及时报警，由公安机关依法处理。公安机关将进行调查取证，并根据情况对打人者进行刑事处罚或行政处罚。
法律途径解决：
- 如果打人者拒绝承担责任或双方无法就赔偿事宜达成一致，受害人可以通过法律途径解决纠纷。可以向人民法院提起民事诉讼，要求打人者承担侵权责任并赔偿损失。
如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。我将根据您的具体情况，提供专业的法律意见和解决方案。