工厂主管歧视残疾人的行为是违法的。以下从不同角度为您详细分析：
法律背景与规定
平等就业权：根据我国相关法律法规，劳动者享有平等就业和选择职业的权利，不因民族、种族、性别、宗教信仰、残疾等因素而受歧视。工厂主管歧视残疾人的行为，明显违反了这一原则。
反就业歧视法：我国虽然没有专门的《反就业歧视法》，但《劳动法》、《就业促进法》以及《残疾人保障法》等法律法规中均明确规定了禁止就业歧视的内容。这些法律共同构成了我国反就业歧视的法律体系，为残疾人等弱势群体提供了法律保护。
主管歧视行为的违法性
直接违法：工厂主管作为工厂的管理者，其歧视残疾人的行为直接违反了上述法律法规中关于平等就业和禁止就业歧视的规定。这种行为不仅损害了残疾人的合法权益，也破坏了社会的公平与正义。
可能承担的法律责任：如果工厂主管的歧视行为导致残疾人遭受了经济损失或精神损害，那么主管或工厂可能需要承担相应的民事赔偿责任。此外，如果歧视行为情节严重，还可能构成犯罪，主管或工厂相关责任人员可能需要承担刑事责任。
应对建议
收集证据：如果您或您认识的残疾人遭遇了工厂主管的歧视，首先应当收集相关证据，如歧视性言论的录音、录像、书面材料等。这些证据将有助于后续维权。
向相关部门投诉：您可以向当地劳动监察部门或残疾人联合会等组织投诉工厂主管的歧视行为。这些部门和组织将依法进行调查处理，并保护您的合法权益。
寻求法律援助：如果投诉无果或您认为需要更专业的法律帮助，可以寻求律师的法律援助。律师将为您提供专业的法律意见和维权方案，帮助您维护自己的合法权益。
可能的法律后果
对工厂的影响：如果工厂被查实存在歧视残疾人的行为，可能会面临行政处罚、声誉损害等后果。这将影响工厂的正常运营和长期发展。
对主管个人的影响：工厂主管如果因歧视行为被查实，可能会面临警告、罚款、解雇等处罚。如果歧视行为构成犯罪，还可能面临刑事追究。
总结来说，工厂主管歧视残疾人的行为是违法的，不仅违反了相关法律法规的规定，也损害了残疾人的合法权益。如果您或您认识的残疾人遭遇了此类歧视，应当积极收集证据并寻求法律帮助以维护自己的权益。如果您有任何法律问题或需要进一步的法律咨询，请随时向我提问。