结论：可以起诉，但能否胜诉以及最终能否要回钱，需结合具体情况判断，包括是否有证据证明委托关系、对方是否构成违约或欺诈、诉讼时效是否已过等。以下是具体分析：

一、关于能否起诉

1. 法律关系基础
   您与对方之间若存在“花钱办事”的约定，本质上属于委托合同关系（或口头合同）。根据《民法典》第919条，委托合同是委托人和受托人约定，由受托人处理委托人事务的合同。即使未签订书面合同，只要双方达成合意且内容合法，合同即成立。

   • 若对方未完成委托事项且拒绝退钱，您有权以“委托合同纠纷”或“不当得利纠纷”为由向法院起诉，要求对方返还钱款并赔偿损失。

2. 关键证据要求
   起诉需提供证据证明双方存在委托关系及对方未履约的事实，例如：

   • 转账记录（证明付款事实）；
     
   • 聊天记录、录音、证人证言（证明对方承诺办事且未完成）；
     
   • 对方书面或口头承认未办事的证据（如“事情没办成，钱退不了”等表述）。
     若缺乏证据，法院可能因“无法证明委托关系存在”而驳回诉求，因此证据收集是胜诉的关键。

二、关于诉讼时效

1. 一般规则
   根据《民法典》第188条，民事诉讼时效为3年，自权利人知道或应当知道权利受损之日起计算。

   • 若您知道对方未办事且拒绝退钱的时间已超过3年，对方可能提出“诉讼时效抗辩”，法院若认定时效已过，将驳回您的诉求。
     
   • 例外情形：若您能证明在3年内曾向对方主张权利（如催款记录、报警记录等），诉讼时效可中断并重新计算3年。

2. 特殊情况

   • 若对方构成诈骗：若对方从一开始就以非法占有为目的，虚构事实骗取钱财，可能涉嫌诈骗罪。此时您应向公安机关报案，追究对方刑事责任，同时可提起刑事附带民事诉讼要求赔偿。
     
   • 若对方行为涉及行政违法：如对方无资质从事相关活动（如“托关系”办事可能涉及行贿、伪造证件等），您可向相关部门举报，但举报不影响民事诉讼的提起。

三、操作建议

1. 立即收集证据
   梳理所有与对方的沟通记录、付款凭证，尽量补充书面证据（如要求对方补写欠条或退款承诺）。

2. 咨询律师评估
   因案件涉及证据审查、时效计算等专业问题，建议携带材料面谈律师，由律师分析胜诉概率及诉讼策略。

3. 尽快启动程序
   若证据充分且未过诉讼时效，应尽快起诉；若时效临近，可先发律师函或报警留存主张权利的证据，避免时效过期。

总结：几年后仍可起诉，但需重点解决证据和时效问题。若您有相关材料或具体细节，可进一步向我描述，我会帮您制定更精准的应对方案。