结论：签了合同后临时不做了直接走人，用人单位扣钱是否合法，需根据具体情况判断，不能一概而论。以下从不同角度进行分析：

一、合同中有明确约定且约定合法的情况

如果劳动合同或劳务合同中明确约定了劳动者在未提前通知或未完成一定工作任务的情况下离职，用人单位有权扣除一定比例的工资或违约金，并且该约定不违反法律法规的强制性规定（如不违反《劳动合同法》中关于违约金仅限于服务期和竞业限制的规定），那么用人单位按照合同约定扣钱是合法的。

法律依据：

• 《劳动合同法》第二十二条：用人单位为劳动者提供专项培训费用，对其进行专业技术培训的，可以与该劳动者订立协议，约定服务期。劳动者违反服务期约定的，应当按照约定向用人单位支付违约金。违约金的数额不得超过用人单位提供的培训费用。用人单位要求劳动者支付的违约金不得超过服务期尚未履行部分所应分摊的培训费用。
• 《劳动合同法》第二十三条：用人单位与劳动者可以在劳动合同中约定保守用人单位的商业秘密和与知识产权相关的保密事项。对负有保密义务的劳动者，用人单位可以在劳动合同或者保密协议中与劳动者约定竞业限制条款，并约定在解除或者终止劳动合同后，在竞业限制期限内按月给予劳动者经济补偿。劳动者违反竞业限制约定的，应当按照约定向用人单位支付违约金。

举例：若合同中约定，劳动者未提前30天通知离职，需支付一个月工资作为违约金，且该约定不违反上述法律条款，那么劳动者直接走人，用人单位扣除一个月工资作为违约金是合法的。

二、合同中没有明确约定或约定违法的情况

如果劳动合同或劳务合同中没有明确约定劳动者离职时用人单位可以扣钱，或者约定的扣钱条款违反了法律法规的强制性规定（如约定了除服务期和竞业限制外的其他违约金），那么用人单位扣钱是不合法的。

法律依据：

• 《劳动合同法》第二十五条：除本法第二十二条和第二十三条规定的情形外，用人单位不得与劳动者约定由劳动者承担违约金。
• 《工资支付暂行规定》第十六条：因劳动者本人原因给用人单位造成经济损失的，用人单位可按照劳动合同的约定要求其赔偿经济损失。经济损失的赔偿，可从劳动者本人的工资中扣除。但每月扣除的部分不得超过劳动者当月工资的20%。若扣除后的剩余工资部分低于当地月最低工资标准，则按最低工资标准支付。

举例：若合同中未约定离职扣钱条款，或约定了除服务期和竞业限制外的其他违约金，劳动者直接走人，用人单位无权扣除劳动者工资作为违约金。若劳动者给用人单位造成了经济损失，用人单位可以按照劳动合同的约定要求其赔偿经济损失，但扣除工资的比例和方式需符合上述法律规定。

三、劳动者给用人单位造成实际损失的情况

即使合同中没有明确约定扣钱条款，但如果劳动者直接走人给用人单位造成了实际损失（如因劳动者离职导致项目停滞、客户流失等），用人单位有权要求劳动者赔偿损失。但赔偿损失的金额需以实际损失为限，且用人单位需承担举证责任。

法律依据：

• 《民法典》第五百七十七条：当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。

举例：若劳动者因直接走人导致用人单位项目停滞，造成了直接经济损失（如已投入的成本、预期收益等），用人单位可以要求劳动者赔偿这部分损失，但需提供充分证据证明损失的存在和金额。

建议：

• 作为劳动者，在签订劳动合同时，应仔细阅读合同条款，特别是关于离职和违约金的约定，确保自己的权益不受侵害。
• 若因特殊原因需要离职，应提前与用人单位沟通，并按照合同约定或法律规定提前通知用人单位，以减少不必要的纠纷。
• 若用人单位存在违法扣钱行为，劳动者可以向当地劳动监察部门投诉或申请劳动仲裁，维护自己的合法权益。

如有更多疑问或需要进一步的法律帮助，请直接向我咨询。