结论前置：中介是否有权留用或辞退员工，取决于中介与员工之间的法律关系以及工厂与中介之间的合作模式。以下从不同角度进行分析：

1. 若中介与员工构成劳动关系：

   • 法律关系：在此情况下，中介作为用人单位，与员工签订劳动合同，建立劳动关系。
   • 留用与辞退权：中介作为用人单位，有权根据《劳动合同法》的相关规定，对员工进行留用或辞退。但辞退员工需符合法定条件，如员工严重违反公司规章制度、不能胜任工作等，且需遵循法定程序，如提前通知、支付经济补偿等。
   • 工厂的角色：工厂作为用工单位，与员工之间不存在直接的劳动关系，因此无权直接留用或辞退员工。工厂若对员工的工作表现不满意，应通过与中介沟通，由中介根据法律规定和合同约定进行处理。

2. 若中介与员工构成劳务关系或中介仅为招聘代理：

   • 法律关系：在此情况下，中介可能仅作为招聘代理，为工厂介绍员工，或与员工构成劳务关系，即中介提供劳务服务，员工提供劳动力。
   • 留用与辞退权：
     • 若为招聘代理：中介无权留用或辞退员工，因为员工与工厂之间可能直接建立劳动关系或劳务关系。中介仅负责招聘流程，不涉及员工的后续管理。
     • 若为劳务关系：中介与员工之间可能约定了劳务期限和条件，但辞退员工仍需遵循双方约定和法律规定。不过，与劳动关系相比，劳务关系的辞退条件可能更为灵活，但仍需确保不违反法律法规的强制性规定。
   • 工厂的角色：无论中介与员工构成何种关系，工厂作为实际使用员工的一方，若希望留用或辞退员工，均需与员工（或中介，若中介为用人单位）进行协商，并遵循相关法律法规的规定。若工厂直接辞退员工（在员工与工厂构成劳动关系的情况下），可能构成违法解除劳动合同，需承担相应的法律责任。

法律建议：

• 对于员工而言，应明确自己与中介、工厂之间的法律关系，了解自己的权益和义务。在签订合同时，应仔细阅读合同条款，确保自己的权益得到保障。
• 对于工厂而言，若选择将招聘外包给中介，应明确与中介的合同条款，包括中介的职责、员工的归属、留用与辞退的条件等。同时，工厂应加强对中介的监督和管理，确保中介的行为符合法律法规和合同约定。
• 若发生纠纷或争议，建议双方首先通过协商解决；协商不成的，可以寻求劳动仲裁或诉讼等法律途径解决。

可能法律后果：

• 若中介或工厂违反法律法规或合同约定，擅自留用或辞退员工，可能面临法律责任，如支付赔偿金、恢复劳动关系等。
• 员工若认为自己的权益受到侵害，可以向劳动监察部门投诉或申请劳动仲裁，维护自己的合法权益。

如有更多疑问或需要进一步的法律帮助，请直接向我咨询。