若中介安排您到工厂工作，但工资由工厂直接发放且中介不参与工资管理，而工厂未支付工资，您可按照以下步骤处理：

1. 明确法律关系与责任主体
   首先需确认您与工厂、中介之间的法律关系。若您直接受雇于工厂（即与工厂签订劳动合同或形成事实劳动关系），则工厂是工资支付的法定责任主体，中介仅起介绍作用，无权管理或截留工资。此时工厂未支付工资的行为，已违反《中华人民共和国劳动合同法》第三十条：“用人单位应当按照劳动合同约定和国家规定，向劳动者及时足额支付劳动报酬。”

2. 与工厂协商解决
   您可先与工厂沟通，要求其按约定支付工资。沟通时需注意：

   • 保留书面证据（如聊天记录、邮件等），证明您已主张权利；
     
   • 明确要求工厂限期支付，并告知逾期不付可能承担的法律后果（如加付赔偿金）。
     若工厂以“已委托中介发放”等理由推脱，您需指出其委托行为无效，因中介并非法定工资支付主体，工厂仍需对您承担直接支付义务。

3. 向劳动监察部门投诉
   若协商无果，您可向当地劳动监察部门投诉。根据《劳动保障监察条例》第十一条，劳动监察部门有权对用人单位支付工资情况进行监督检查。投诉时需提交：

   • 身份证明（身份证复印件）；
     
   • 劳动关系证明（如劳动合同、工作证、考勤记录等）；
     
   • 工资未支付证据（如工资条、银行流水、同事证言等）。
     劳动监察部门受理后，将责令工厂限期支付工资；逾期不支付的，可责令其按应付金额50%以上100%以下的标准加付赔偿金。

4. 申请劳动仲裁
   若投诉未解决争议，您可向劳动争议仲裁委员会申请仲裁。仲裁需提交：

   • 仲裁申请书（载明双方信息、仲裁请求、事实与理由）；
     
   • 证据材料（同投诉所需材料）；
     
   • 身份证明。
     仲裁委员会将依法审理，若认定工厂未支付工资事实成立，将裁决其支付工资及可能的经济补偿（如未签劳动合同的双倍工资差额等）。

5. 向法院起诉
   若对仲裁裁决不服，您可在收到裁决书之日起15日内向法院提起诉讼。诉讼需提交：

   • 起诉状（载明原告、被告信息、诉讼请求、事实与理由）；
     
   • 仲裁裁决书（如有）；
     
   • 证据材料。
     法院将依法审理并作出判决，判决生效后，若工厂仍不履行，您可申请强制执行。

特殊情形处理：

• 若您与中介签订劳务合同，被派遣至工厂工作：此时工厂为用工单位，中介为用人单位。根据《劳动合同法》第五十八条，中介有义务向您支付工资。若工厂已将工资支付给中介，但中介未支付给您，您应直接向中介主张权利，并可参照上述步骤（协商、投诉、仲裁、诉讼）处理。同时，您可要求工厂提供已向中介支付工资的证明，以辅助维权。
  
• 若中介以“代发工资”为由收取费用：中介无权从您的工资中扣除任何费用（除非合同明确约定且不违反法律规定）。若中介擅自扣费，您可要求其返还，并可向劳动监察部门投诉其违法行为。

建议：

• 保留所有与工作、工资相关的证据，避免因证据不足导致维权困难；
  
• 及时主张权利，避免超过仲裁时效（1年）或诉讼时效（3年）；
  
• 若对法律程序不熟悉，可寻求法律援助或委托律师代理，以提高维权效率。
  

如有进一步疑问，可直接向我咨询，我将为您提供专业法律支持。