残疾人作为弱势群体，在工厂上班时若被人打了，施暴者需要承担相应的法律责任，具体责任类型和程度需根据伤情鉴定结果和具体情节来确定。以下从不同角度为您详细分析：

一、民事责任

1. 赔偿损失：

   • 根据《中华人民共和国民法典》的相关规定，侵害他人造成人身损害的，应当赔偿医疗费、护理费、交通费、营养费、住院伙食补助费等为治疗和康复支出的合理费用，以及因误工减少的收入。
   • 如果残疾人的伤情构成伤残，施暴者还需赔偿残疾赔偿金、残疾辅助器具费等。
   • 举例：若残疾人因被打导致骨折，需要住院治疗，那么施暴者需承担住院期间的医疗费、护理费、误工费等费用。

2. 精神损害赔偿：

   • 如果残疾人的伤情严重，导致精神受到严重损害，还可以要求施暴者承担精神损害赔偿责任。
   • 举例：若残疾人因被打导致长期精神抑郁，影响正常生活和工作，那么可以要求施暴者支付一定的精神损害抚慰金。

二、行政责任

• 根据《中华人民共和国治安管理处罚法》的相关规定，殴打他人的，或者故意伤害他人身体的，处五日以上十日以下拘留，并处二百元以上五百元以下罚款；情节较轻的，处五日以下拘留或者五百元以下罚款。
• 举例：若施暴者因琐事与残疾人发生争执，进而动手打人，但伤情不严重，那么施暴者可能会受到行政拘留和罚款的处罚。

三、刑事责任

1. 故意伤害罪：

   • 如果残疾人的伤情构成轻伤及以上，施暴者可能构成故意伤害罪，需要承担刑事责任。
   • 根据《中华人民共和国刑法》的相关规定，故意伤害他人身体的，处三年以下有期徒刑、拘役或者管制。致人重伤的，处三年以上十年以下有期徒刑；致人死亡或者以特别残忍手段致人重伤造成严重残疾的，处十年以上有期徒刑、无期徒刑或者死刑。
   • 举例：若残疾人因被打导致重伤，那么施暴者可能会被判处三年以上十年以下有期徒刑。

2. 特殊保护条款：

   • 残疾人作为弱势群体，法律对其有特殊的保护。如果施暴者明知对方是残疾人而故意伤害，可能会受到更严厉的处罚。

四、其他责任

• 工厂的责任：如果工厂在管理上存在疏忽，导致残疾人被打事件发生，工厂也可能需要承担一定的管理责任。例如，工厂未提供安全的工作环境、未及时制止暴力行为等。
• 建议：残疾人或其家属在事件发生后，应及时报警并保留相关证据，如医疗记录、现场照片、证人证言等，以便后续维权。

总结来说，残疾人在工厂上班被人打了，施暴者可能承担民事责任、行政责任和刑事责任，具体责任类型和程度需根据伤情鉴定结果和具体情节来确定。如果您或您身边的残疾人朋友遇到此类情况，请及时向我咨询，我会根据您的具体情况提供详细的法律建议。