若被施工单位“硬塞”了钱（即施工单位未经合法程序或违背您意愿给予财物），您可以通过以下途径退回并维护自身权益：

1. 明确拒绝并直接退回
   若您当场发现施工单位强行给予财物（如现金、购物卡等），应立即明确表示拒绝，并要求对方收回。若对方坚持留下，可当场录制视频或寻找证人，证明您未主动索要且明确拒绝，随后通过邮寄（留存凭证）或当面交还的方式退回，避免后续纠纷。

2. 通过书面形式正式退回并留存证据
   若已接收财物，需尽快以书面形式（如退回函、短信、邮件）通知施工单位，明确表示“该财物属于不当利益，现予以退回”，并要求对方签收或确认。若对方拒不配合，可通过银行转账退回（备注“退回XX项目款项”），或委托第三方（如律师、公证处）协助退回，确保过程可追溯。

3. 向相关部门举报施工单位违法行为
   若施工单位以贿赂为目的给予财物，可能涉及行贿罪或对非国家工作人员行贿罪（根据对象身份不同）。您可向当地纪委监委（若涉及公职人员）、公安机关经侦部门或建设行政主管部门举报，并提供财物往来证据（如转账记录、录音、证人证言等）。举报后，相关部门会介入调查，若查实施工单位违法，财物可能被依法没收，您也无需承担责任。

4. 警惕“被卷入”法律风险
   若您未及时退回且无法证明财物为“被迫接收”，可能被认定为“受贿”或“非国家工作人员受贿”（根据身份不同），面临刑事责任。因此，务必在接收后第一时间退回，并保留拒绝、退回的证据（如书面记录、视频、证人等），以证明自身无主观故意。

关键提醒：

• 施工单位“硬塞”钱的行为本身违法，您无需因退回而顾虑“得罪对方”，合法维权是首要原则。
  
• 若对方以威胁、骚扰等方式逼迫您接收或拒绝退回，可立即报警并保留证据（如录音、短信），追究其法律责任。
  

如有进一步细节（如财物金额、接收场景、对方身份等），可直接向我咨询，我会结合具体情形为您分析风险并制定应对方案。