结论：是否需要付给中介这400元，主要取决于你与中介之间的合同约定以及相关法律规定。以下从不同角度进行分析：

1. 合同约定角度：

   • 有明确约定：如果你与中介签订的合同中明确规定了，在你不满意工作并选择不继续做的情况下，需要向中介支付这笔垫付费用，那么根据合同约定，你是需要支付这笔费用的。合同是双方意思表示一致的产物，具有法律约束力，双方都应遵守。
   • 无明确约定：如果合同中没有明确规定这一情况下的费用支付问题，那么就需要根据相关法律规定和行业惯例来判断。

2. 法律规定角度：

   • 中介服务性质：中介服务通常属于居间合同范畴，根据《中华人民共和国民法典》中关于居间合同的规定，居间人促成合同成立的，委托人应当按照约定支付报酬。但在此情况下，如果中介只是垫付了费用，并未直接促成你与厂方之间的劳动合同成立（即你并未实际开始工作或工作很短时间就离职），那么中介要求你支付全部垫付费用可能缺乏法律依据。
   • 公平原则：即使合同中有相关约定，但如果该约定显失公平（如中介几乎未提供任何服务就要求支付高额费用），你也可以根据《中华人民共和国民法典》中的公平原则，请求法院或仲裁机构对合同条款进行调整或撤销。

3. 实际操作建议：

   • 查看合同：首先，仔细查看你与中介签订的合同，了解其中关于费用支付的具体约定。
   • 与中介协商：如果合同中没有明确规定或你认为约定不合理，可以尝试与中介进行协商，寻求双方都能接受的解决方案。
   • 寻求法律帮助：如果协商无果，且你认为自己的权益受到了侵害，可以向我咨询或寻求其他法律帮助，通过法律途径维护自己的合法权益。

可能后果：

• 如果你选择支付这笔费用，那么与中介之间的纠纷可能得到解决，但你需要确保支付行为符合合同约定和法律规定。
• 如果你拒绝支付且中介认为你有支付义务，中介可能会采取法律手段追讨这笔费用，这可能导致你面临法律诉讼和相应的法律责任。

总结与建议： 在处理此类问题时，建议你首先仔细审查合同条款，了解自己的权利和义务。同时，保持与中介的沟通，尝试通过协商解决问题。如果协商无果且你认为自己的权益受到了侵害，不要犹豫，及时向我咨询或寻求其他法律帮助。在处理法律问题时，保持冷静和理性是非常重要的。