你应当明确拒绝，并告知对方这是违法行为，且可能会对你造成严重的法律风险。下面我具体分析一下：

一. 拒绝的理由

1. 法律风险：根据《银行卡业务管理办法》第二十八条，银行卡及其账户只限经发卡银行批准的持卡人本人使用，不得出租和转借。如果你将银行卡借给他人使用，尤其是用于发放工人工资，一旦出现问题，如工资未按时发放、资金被挪用等，你可能需要承担法律责任。
2. 财务风险：你的银行卡与你的个人财务紧密相关，如果他人使用你的银行卡进行不当操作，如大额转账、恶意透支等，将直接影响你的财务状况和信用记录。
3. 信息安全风险：将银行卡借给他人，意味着你需要将银行卡的密码、验证码等重要信息告知对方，这将严重威胁你的信息安全。

二. 拒绝的方式

1. 直接沟通：你可以直接告知对方，出于法律、财务和信息安全的考虑，你无法将银行卡借给其使用。同时，也可以建议对方寻找其他合法的途径来发放工人工资，如通过正规的银行转账或第三方支付平台。
2. 书面拒绝：如果直接沟通无法解决问题，你可以考虑以书面的形式，如邮件、短信等，明确表达你的拒绝意愿，并阐述你的理由和担忧。

三. 后续建议

• 保持警惕：如果对方继续纠缠或采取其他不当手段试图获取你的银行卡信息，你应当保持警惕，并及时向银行或相关部门报告。
• 寻求帮助：如果你感到无法处理这种情况，或者担心自己的权益受到侵害，可以寻求法律或财务方面的专业帮助。

我建议你坚决拒绝他人的这一请求，并明确告知其可能涉及的法律风险。如有进一步需要，您可以继续咨询我。