结论：催收方声称要往单位发缴款通知书，这一行为是否合法合规以及你该如何应对，需分情况讨论，具体如下：

1. 若催收行为合法合规

   • 合法性判断：如果催收方是依法成立的具有催收资质的机构，且你的债务确实存在且已到期，他们在催收过程中遵循了相关法律法规，比如没有使用暴力、威胁、辱骂等不当手段，只是以合理合法的方式通知你履行还款义务，包括向单位发缴款通知书这种相对正式的提醒方式（前提是此方式不违反你与债权人或相关方的特别约定，也不侵犯你的其他合法权益），那么从法律角度来说，他们有一定的权利采取这样的措施来促使你还款。
   • 应对方式：
     • 积极沟通协商：你可以主动与催收方联系，说明自己目前的经济状况和还款困难，尝试与他们协商制定一个合理的还款计划，比如延长还款期限、分期还款等。这样既能表现出你还款的诚意，也有可能避免催收方进一步采取更激烈的措施。
     • 核实通知书内容：当收到往单位发的缴款通知书后，要仔细核实通知书上的债务信息，包括债务金额、债权人、债务产生的原因等是否准确无误。如果发现有错误或疑问，及时与催收方沟通要求更正或解释。
     • 向单位说明情况：为了避免给单位造成不必要的困扰和影响，你可以提前向单位的相关负责人或人力资源部门说明自己面临债务催收的情况，解释这并非恶意拖欠，而是正在积极协商解决，争取单位的理解和支持。

2. 若催收行为违法违规

   • 违法性判断：
     • 侵犯隐私权：如果催收方在未经你同意的情况下，擅自将你的个人债务信息透露给单位，这可能侵犯了你的隐私权。根据相关法律规定，自然人的个人信息受法律保护，任何组织或者个人不得非法收集、使用、加工、传输他人个人信息，不得非法买卖、提供或者公开他人个人信息。
     • 骚扰行为：如果催收方频繁往单位发缴款通知书，干扰了单位的正常工作秩序，或者对你在单位的工作和生活造成了严重的负面影响，这种行为可能构成骚扰。例如，每天多次发送通知书，或者在通知书中使用威胁、恐吓等语言。
     • 冒充公检法等：如果催收方在通知书上冒充公检法等国家机关工作人员，声称不还款将面临刑事处罚等，这是典型的违法犯罪行为，严重扰乱了社会秩序和司法公正。
   • 应对方式：
     • 收集证据：保留催收方往单位发缴款通知书的相关证据，包括通知书的原件或复印件、发送的记录（如邮件、短信等）、与催收方的沟通记录（如电话录音、聊天记录等）。这些证据将有助于你后续维护自己的合法权益。
     • 向相关部门投诉：你可以向当地的金融监管部门、消费者协会等机构投诉催收方的违法违规行为。金融监管部门有权对金融机构及其委托的催收机构进行监管，消费者协会则可以为你提供维权支持和帮助。
     • 报警处理：如果催收方的行为涉嫌犯罪，如侵犯公民个人信息罪、寻衅滋事罪等，你可以及时向公安机关报案，让警方介入调查处理。
     • 提起诉讼：如果催收方的行为给你造成了实际的损失，如名誉受损、精神损害等，你可以考虑向法院提起民事诉讼，要求催收方承担相应的赔偿责任。

在面对催收方声称要往单位发缴款通知书的情况时，要保持冷静，根据具体情况采取合适的应对措施。如果你在处理过程中遇到任何疑问或需要进一步的法律帮助，可以直接向我咨询。