面对托人办事没办成却不给退钱的情况，我们确实需要冷静分析并采取合适的措施来维护自身权益。以下是我为您详细梳理的解决步骤和建议：

一、明确行为性质

首先，要判断您所委托的事务是否合法。这是解决问题的关键前提。

1. 合法委托事务：

   • 如果您委托的是合法事务，如正常的商业合作、咨询服务等，那么您与受托人之间形成了委托合同关系。
   • 根据法律规定，受托人有义务返还因委托事务取得的财产。若事务未办成，受托人应退还您预先支付的费用。

2. 非法或不正当事务：

   • 如果您委托的是非法或不正当事务，如违规办理入学、工作安排等，那么这种“委托”是不受法律保护的。
   • 在这种情况下，您需要权衡利弊，谨慎处理。因为参与非法事务可能使您也面临法律风险。

二、采取具体解决措施

根据行为性质的不同，我们可以采取以下措施：

1. 对于合法委托事务：

   • 协商解决：首先尝试与受托人进行友好协商，明确表达您的退款意愿，并了解未退款的原因。提出妥协方案，如减少退款金额等，以促成和解。
   • 投诉处理：如果协商无果，您可以向消费者协会、行业协会或相关监管部门投诉，请求协助解决。提供详细情况及相关证据，以便相关部门进行调查处理。
   • 法律途径：如果投诉也未能解决问题，您可以咨询专业律师，了解自己的权益和可能的法律途径。根据律师建议，向法院提起诉讼，要求对方退还相关款项并承担违约责任。

2. 对于非法或不正当事务：

   • 私下沟通：尝试与受托人私下沟通退款事宜，但需注意避免留下涉及违法委托事项的证据。
   • 权衡利弊：在决定是否报案前，要综合权衡利弊。因为报案可能会使双方都面临法律风险，特别是如果您也参与了非法事务。
   • 报警处理：如果对方行为涉嫌诈骗，即以非法占有为目的，通过虚构事实或隐瞒真相的方式骗取钱财，那么您可以直接向公安机关报警，提供详细的案情描述和相关证据。

三、注意事项

在处理过程中，您还需要注意以下几点：

• 保持冷静：避免采取过激行为，以免激化矛盾或引发不必要的法律纠纷。
• 保留证据：保留好所有与对方的沟通记录、转账记录、合同等相关证据。这些证据在协商、投诉或法律途径中都将起到关键作用。
• 吸取教训：对于非法委托事务，应深刻反思并吸取教训。避免再次陷入类似困境，以免给自己带来不必要的麻烦和损失。

综上所述，面对托人办事没办成却不退钱的情况，我们应根据事务的合法性及实际情况选择合适的处理方式。在维护自身权益的同时，也要确保行为的合法性，避免引发不必要的法律纠纷。希望这些建议能对您有所帮助。