核心结论：针对有人往您工资卡打钱导致您扣税的问题，需要分情况处理，关键在于明确这笔钱的性质以及是否应计入您的应税收入。以下是具体分析：

1. 若该款项属于您的合法收入
   如果打款方是您的雇主或合法支付方（例如奖金、报销款等），且该款项属于您应得的劳动报酬或合法经济利益，那么这笔钱本身就属于您的应税收入范围。根据《个人所得税法》，工资、薪金所得，劳务报酬所得等均需缴纳个人所得税。此时，扣税是合法合规的，您无需过度担忧，但可以要求单位在发放时明确款项性质，并确保税务申报准确无误。

2. 若该款项不属于您的合法收入

   • 误打款或他人错误转账：如果款项是他人误打入您的账户（例如公司财务操作失误、他人汇款错误等），这笔钱并不属于您的应税收入。您无需为此缴纳个人所得税，但需及时联系打款方说明情况，并配合将款项退回。若未退回且被税务机关认定为您的收入，可能面临补税、滞纳金甚至罚款的风险。
     
   • 不明来源或非法收入：如果款项来源不明或涉及非法活动（例如洗钱、诈骗等），您不仅无需缴税，还应立即向公安机关报案。此类款项可能涉及刑事犯罪，若您知情或协助转移，可能承担法律责任。

3. 税务申报与异议处理

   • 如果您认为扣税有误（例如单位将非工资款项计入应税收入），可要求单位提供税务申报明细，核对款项性质。若单位拒绝更正，您可向当地税务机关提出异议，申请税务复议或行政诉讼。
     
   • 若您已退回误打款项，但税务机关仍要求补税，您可提供退款凭证（如银行转账记录、双方确认书等）证明款项不属于您的收入，申请退税或调整申报。

建议行动步骤：

1. 立即联系打款方，确认款项性质及打款原因；
   
2. 保留所有相关证据（如银行流水、沟通记录等）；
   
3. 若款项合法，配合单位完成税务申报；若款项非法或误打，及时退回并报案；
   
4. 对税务处理有异议时，及时咨询税务机关或通过法律途径解决。
   

如有进一步疑问或需要具体操作指导，欢迎随时向我提问。