结论：您可以考虑起诉对方要求退钱，但能否成功取决于多个因素，包括合同约定、对方行为是否构成违约以及您能否提供充分证据等。
分析说明：
合同关系与违约：
- 当您委托他人处理违章时，双方之间实际上形成了一种委托合同关系。根据《中华人民共和国民法典》的相关规定，委托合同是委托人和受托人约定，由受托人处理委托人事务的合同。
- 如果受托人（即您委托处理违章的人）未按照约定履行处理违章的义务，那么其行为可能构成违约。在此情况下，您有权要求受托人承担违约责任，包括退还已支付的款项。
起诉条件与证据：
- 要起诉对方要求退钱，您需要满足一定的起诉条件，包括具有明确的被告、具体的诉讼请求和事实、理由等。
- 同时，您需要提供充分的证据来证明双方之间的委托合同关系、您已支付款项的事实以及受托人未履行处理违章义务的事实。这些证据可能包括委托合同、付款凭证、沟通记录等。
可能的法律后果：
- 如果法院认定受托人构成违约，那么您有可能获得胜诉判决，要求受托人退还已支付的款项。
- 然而，如果受托人能够证明其已履行了处理违章的义务，或者您无法提供充分证据来证明其违约行为，那么您可能面临败诉的风险。
行动建议：
- 收集证据：首先，您需要收集所有与委托处理违章相关的证据，包括委托合同、付款凭证、沟通记录等。这些证据将对于证明您的主张至关重要。
- 尝试协商：在起诉之前，您可以尝试与受托人进行协商，看是否能够达成和解协议并退还部分或全部款项。这通常是一种更快速、更经济的解决方式。
- 咨询律师：如果您决定起诉对方，建议您咨询一位专业律师，特别是擅长处理交通事故和合同纠纷的律师。律师将能够为您提供更具体的法律建议，并帮助您准备起诉材料和进行诉讼。
特殊场景提醒：
- 如果您与受托人之间没有签订书面的委托合同，那么您需要依靠其他证据来证明双方之间的委托关系。这可能会增加诉讼的难度和不确定性。
- 如果受托人已经部分履行了处理违章的义务，但您认为其履行不符合约定或存在瑕疵，那么您需要在起诉时明确说明这一点，并提供相应的证据来支持您的主张。
后续思考依据：
- 在决定是否起诉之前，您需要仔细权衡诉讼的成本和收益。诉讼可能需要花费一定的时间、金钱和精力，而且结果并不总是可预测的。
- 如果您决定起诉并获得了胜诉判决，但受托人没有财产可供执行或拒不履行判决义务，那么您可能需要考虑采取其他执行措施或接受部分损失的现实。
如有其他疑问或需要进一步的法律帮助，请直接向我咨询。