结论：在没有合同的情况下，若做代理不想继续并要求退钱但遭拒，你可以尝试通过协商、收集证据并寻求法律途径等方式来维护自己的权益。以下是对此问题的详细分析：

一、协商解决

1. 尝试友好沟通：首先，你可以尝试与对方进行友好沟通，明确表达你的意愿和理由，看是否能够达成退款协议。在沟通过程中，保持冷静和理性，避免情绪化的言辞，有助于更好地解决问题。

二、收集证据

1. 转账记录：保留所有与代理费用相关的转账记录，这是证明你已支付费用的直接证据。
2. 沟通记录：保存与对方的所有沟通记录，包括聊天记录、邮件、短信等，这些记录可能包含对方承认收到费用或同意退款的承诺。
3. 其他证据：如果可能的话，收集其他能够证明你与对方之间存在代理关系的证据，如口头协议的见证人、相关业务往来的文件等。

三、法律途径

1. 起诉要求退款：如果协商无果，你可以考虑向法院提起诉讼，要求对方退还代理费用。在起诉时，你需要提供上述收集的证据来支持你的主张。法院将根据双方提供的证据和法律规定来判决是否支持你的退款请求。

   • 法律依据：虽然双方没有签订书面合同，但根据《中华人民共和国民法典》的相关规定，口头合同也是具有法律效力的。只要你能证明双方之间存在代理关系，并且你已支付了代理费用，那么对方就有义务按照约定提供服务或退还费用。

2. 考虑诉讼成本：在决定起诉前，你需要考虑诉讼成本，包括律师费、诉讼费等。如果代理费用金额不大，而诉讼成本相对较高，那么你需要权衡利弊，决定是否值得通过法律途径来解决。

四、其他建议

1. 寻求调解：在起诉前，你也可以考虑寻求第三方调解机构的帮助，如消费者协会、人民调解委员会等。这些机构可以提供中立的调解服务，帮助双方达成和解协议。
2. 咨询专业律师：虽然我在这里为你提供了一些建议，但每个案件的具体情况都有所不同。如果你对法律程序或证据收集等方面存在疑问，建议直接向我咨询，我可以根据你的具体情况提供更详细的法律意见。

最后，我想强调的是，虽然双方没有签订书面合同，但这并不意味着你的权益无法得到保障。通过收集证据、协商解决或寻求法律途径等方式，你仍然有机会维护自己的合法权益。如果你在这个过程中遇到任何困难或疑问，随时都可以向我咨询。