结论：跟中介签了合同后不想在工厂继续工作，是否可以直接走，这取决于合同的具体条款以及相关法律法规的规定，不能一概而论。以下从不同角度为你详细分析：
一、合同条款的约束
合同中有明确约定：
- 如果合同中明确规定了离职的条件、程序以及违约责任等，那么你需要按照合同的约定来执行。例如，合同可能规定需要提前一定时间通知中介或工厂，或者需要支付一定的违约金等。在这种情况下，如果你直接走而不遵守合同约定，可能会面临违约责任，如支付违约金或赔偿损失等。
合同中没有明确约定：
- 如果合同中没有对离职条件、程序等作出明确规定，那么你需要参考相关法律法规的规定以及行业惯例来处理。在这种情况下，虽然你可能没有直接的违约责任，但突然离职可能会给工厂和中介带来不便，甚至造成损失，因此建议提前与中介和工厂沟通，协商解决离职事宜。
二、相关法律法规的规定
劳动合同法的相关规定：
- 根据《中华人民共和国劳动合同法》的规定，劳动者提前三十日以书面形式通知用人单位，可以解除劳动合同。在试用期内，劳动者提前三日通知用人单位，可以解除劳动合同。虽然这是针对直接与用人单位签订劳动合同的情况，但如果你与中介签订的合同实质上构成了劳动合同关系（如中介作为劳务派遣单位与你签订合同），那么这一规定同样适用。
- 如果中介或工厂存在违法行为（如未按时支付劳动报酬、未提供劳动保护等），你有权立即解除合同，并无需承担违约责任。
其他相关法律法规：
- 除了劳动合同法外，还有其他相关法律法规可能涉及离职问题，如《中华人民共和国民法典》中关于合同解除的规定等。这些法律法规可能为你提供额外的法律保障或限制。
三、实际操作建议
查看合同条款：
- 首先，仔细查看你与中介签订的合同条款，了解离职的具体规定和违约责任等。
与中介和工厂沟通：
- 如果你决定离职，建议提前与中介和工厂沟通，说明你的离职意愿和原因，并协商解决离职事宜。这有助于减少不必要的纠纷和损失。
遵守法律法规：
- 在离职过程中，务必遵守相关法律法规的规定，避免违法行为带来的法律后果。
保留证据：
- 在与中介和工厂沟通的过程中，保留好相关证据（如聊天记录、邮件等），以备不时之需。
后续思考依据：在处理类似问题时，除了考虑合同条款和法律法规外，还需要考虑实际情况和行业惯例等因素。如果你对合同条款或法律法规有疑问或不确定的地方，建议直接向我咨询，以便更准确地了解你的权利和义务。