结论：临时工干了没几天后离职，用人单位一般不能随意扣钱，但具体是否扣钱以及扣钱的合法性需根据实际情况判断。

分析说明：

1. 劳动合同或协议的约定：

   • 如果临时工与用人单位签订了劳动合同或相关协议，并且其中明确规定了离职时的工资结算方式，包括是否扣钱以及扣钱的条件和比例等，那么双方应按照合同或协议的约定执行。
   • 法律依据：根据《中华人民共和国劳动合同法》的相关规定，劳动合同是劳动者与用人单位确立劳动关系、明确双方权利和义务的协议。双方应按照劳动合同的约定履行各自的义务。

2. 用人单位的规章制度：

   • 如果用人单位的规章制度中明确规定了离职时工资的结算方式，并且这些规章制度已经向劳动者公示或告知，那么这些规定对劳动者也具有约束力。
   • 注意点：用人单位的规章制度不能违反法律法规的强制性规定，否则无效。例如，规章制度中不能规定离职时无条件扣钱或扣钱比例过高等不合理条款。

3. 实际工作情况和法律规定：

   • 如果劳动合同或协议、用人单位的规章制度中均未对离职时工资的结算方式作出明确规定，那么用人单位应按照实际工作情况和相关法律规定来结算工资。
   • 法律规定：根据《中华人民共和国劳动法》的相关规定，劳动者有权获得与其劳动相应的报酬。用人单位不得克扣或者无故拖欠劳动者的工资。
   • 实际工作情况：如果临时工已经提供了劳动，并且用人单位已经接受了这些劳动成果，那么用人单位应支付相应的工资。除非有合法理由（如劳动者给用人单位造成损失等），否则用人单位不得随意扣钱。

特殊场景：

• 如果临时工在离职时给用人单位造成了经济损失，用人单位可以按照劳动合同或相关协议的约定，要求劳动者承担相应的赔偿责任。但赔偿金额应合理，并且不得超过劳动者当月工资的20%（若扣除后的剩余工资部分低于当地月最低工资标准，则按最低工资标准支付）。

行动建议：

• 如果临时工在离职时遇到用人单位随意扣钱的情况，可以先与用人单位协商解决。
• 如果协商无果，可以向当地的劳动监察部门投诉或申请劳动仲裁，以维护自己的合法权益。

后续思考依据：

• 在处理此类问题时，应重点关注劳动合同或协议的约定、用人单位的规章制度以及相关法律法规的规定。
• 同时，也要考虑实际工作情况和双方的过错程度等因素，以做出合理的判断和决策。

如有更多疑问或需要进一步的法律帮助，请直接向我咨询。