关于工厂招工时耳听高频不合格的处罚问题，需分情况讨论，具体如下：

1. 若工厂在招工时明确将耳听高频合格作为录用条件：

   • 法律背景：根据《劳动合同法》的相关规定，劳动者在应聘过程中应如实说明与劳动合同直接相关的基本情况。若工厂在招工简章或录用条件中明确规定了耳听高频合格的要求，且该要求与岗位工作直接相关（如需要听力高度敏感的岗位），则劳动者若不符合此条件，工厂有权不予录用。
   • 处罚措施：在此情况下，工厂无需对耳听高频不合格的应聘者进行处罚，因为这不属于违法或违规行为。工厂只需按照正常的招工流程，对不符合录用条件的应聘者不予录用即可。

2. 若工厂在招工过程中未明确耳听高频合格为录用条件，但事后以耳听高频不合格为由进行处罚或解雇：

   • 法律背景：若工厂在招工时未明确将耳听高频合格作为录用条件，事后却以此为由对应聘者或员工进行处罚或解雇，这可能构成违法解除劳动合同或违法处罚。根据《劳动合同法》的规定，用人单位解除劳动合同应当符合法定条件，并遵循法定程序。
   • 处罚措施及后果：
     • 若对应聘者：工厂无权以未明确的录用条件为由对应聘者进行处罚。若工厂因此拒绝录用应聘者，且应聘者能证明工厂在招工时未明确此条件，应聘者可能无法直接获得法律救济，但可以向劳动监察部门投诉工厂的招工行为不规范。
     • 若对员工：若工厂在员工入职后，以耳听高频不合格为由进行处罚或解雇，员工有权向劳动争议仲裁委员会申请仲裁，要求工厂支付违法解除劳动合同的赔偿金等。赔偿金的具体数额根据员工在工厂的工作年限、工资水平等因素确定。

3. 特殊情况：若耳听高频不合格与岗位工作直接相关，且工厂能证明应聘者或员工在入职时隐瞒了此情况：

   • 法律背景：若工厂能证明耳听高频合格是与岗位工作直接相关的必要条件，且应聘者或员工在入职时故意隐瞒了耳听高频不合格的情况，工厂在发现后有权解除劳动合同，且无需支付赔偿金。
   • 操作建议：工厂在招工过程中应明确录用条件，并在入职时进行必要的体检或测试，以确认应聘者是否符合录用条件。同时，工厂应保留好相关证据，以备不时之需。

总结与建议：

• 工厂在招工时应明确录用条件，包括与岗位工作直接相关的身体条件要求。
• 若工厂以耳听高频不合格为由对应聘者或员工进行处罚或解雇，应确保此要求在招工时已明确，并能提供充分证据证明应聘者或员工不符合此要求。
• 应聘者或员工在应聘或工作过程中应如实说明与劳动合同直接相关的基本情况，避免隐瞒或虚假陈述。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。