在非吸案（非法吸收公众存款案）中，未参与人员若被认定无需退赔，则不会因此受到处罚；若被错误要求退赔而拒绝，可通过法律途径维权；若被错误认定为参与人员且拒不退赔，可能面临强制执行等措施，但可通过申诉纠正。以下是具体分析：

1. 未参与人员的定义与退赔责任
   在非法吸收公众存款案件中，“未参与人员”通常指未直接参与非法吸收公众存款行为、未获取非法利益、未协助实施犯罪的人员。根据《刑法》第六十四条及《关于办理非法集资刑事案件适用法律若干问题的意见》，退赔责任主要针对犯罪嫌疑人、被告人及其关联人员（如实际控制人、高级管理人员、直接责任人员等）。若未参与人员确实未涉及犯罪行为，法律上无强制退赔义务，拒绝退赔不会因此受到刑事或行政处罚。

2. 未参与人员被错误要求退赔的情形
   若未参与人员被错误认定为参与人员或关联人员，并被要求退赔，需分情况处理：

   • 若退赔要求缺乏法律依据：未参与人员可明确拒绝，并通过书面形式向办案机关（如公安机关、检察院、法院）提出异议，说明自身未参与犯罪的事实及理由。若办案机关坚持要求，可申请听证或复议，必要时通过行政诉讼或刑事申诉维护权益。
     
   • 若退赔要求基于错误认定：例如，将未参与人员的合法财产（如工资、投资收益）误列为非法所得，未参与人员需提供证据证明财产合法性（如劳动合同、银行流水、投资合同等），并要求办案机关依法返还。若财产已被扣押或冻结，可申请解除措施并索赔损失。

3. 未参与人员被错误认定为参与人员的法律后果
   若未参与人员被错误认定为参与人员，且拒不退赔“非法所得”，可能面临以下后果：

   • 强制执行：若法院判决退赔，未参与人员可能被纳入失信被执行人名单，限制高消费、冻结银行账户等。但此情形下，未参与人员可通过申诉或再审程序纠正错误判决，解除强制措施。
     
   • 名誉损害：错误认定可能影响个人信用记录或社会评价，未参与人员可要求办案机关公开澄清或通过媒体维权。
     

温馨提示：若您或他人被要求退赔但认为自身未参与非法吸收公众存款行为，建议立即收集证据（如工作记录、财务凭证、无犯罪记录证明等），并向办案机关提交书面异议。若问题复杂，可直接向我咨询，我将结合具体案情为您提供专业法律意见。