结论：找人办理公益金的人不给退钱是否违法，需分情况讨论，关键在于双方是否构成合法有效的合同关系以及对方是否存在违约或违法行为。以下从不同角度展开分析：
1. 若双方构成委托合同关系，且对方未履行义务或存在欺诈
- 法律性质：根据《民法典》第九百一十九条，委托合同是委托人和受托人约定，由受托人处理委托人事务的合同。若您委托他人办理公益金申请，并支付了费用，双方即形成委托合同关系。
- 违法性分析：
- 未履行义务：若对方未按约定完成公益金申请事宜，且无合理理由拒绝退还费用，构成违约，您有权要求其退还并承担违约责任（《民法典》第五百七十七条）。
- 欺诈行为：若对方以非法占有为目的，虚构事实（如谎称有内部渠道、保证申请成功等）骗取费用，可能构成诈骗罪（《刑法》第二百六十六条），您可向公安机关报案。
2. 若对方无合法资质或以公益名义非法敛财
- 法律性质：公益金申请通常需通过正规渠道（如政府机构、慈善组织等），若对方无相关资质或授权，却以“代办公益金”为名收取费用，可能涉嫌非法经营或诈骗。
- 违法性分析：
- 非法经营：若对方未经许可从事公益金代办业务，扰乱市场秩序，可能违反《刑法》第二百二十五条（非法经营罪），但需结合具体情节判断。
- 诈骗风险：如前所述，若对方以虚假承诺骗取钱财，可能构成诈骗罪，您需保留转账记录、聊天记录等证据，及时维权。
3. 若双方未形成明确合同关系，但对方收取费用无合理依据
- 法律性质：若您仅口头委托对方办理，未签订书面合同，但对方收取费用后未提供任何服务，可能构成不当得利。
- 违法性分析：根据《民法典》第九百八十五条，得利人没有法律根据取得不当利益的，受损失的人可以请求得利人返还。您可要求对方退还费用，若对方拒绝，可通过诉讼解决。
行动建议
- 收集证据：保留转账记录、聊天记录、委托协议（如有）等，证明双方关系及对方未履约的事实。
- 协商解决：先与对方沟通，要求退还费用并说明法律依据。
- 投诉或报案：若协商无果，可向当地民政部门（涉及公益金管理）或公安机关投诉/报案。
- 诉讼维权：若金额较大或对方态度恶劣，可向法院提起民事诉讼，要求退还费用并赔偿损失。
温馨提示：公益金申请通常免费或通过正规渠道办理，建议谨慎对待“代办”服务，避免财产损失。如有进一步疑问，可直接向我咨询。