在没有证据的情况下，要追讨渣男所欠的钱确实会面临一些困难，但并非完全没有办法，以下是一些具体的分析和建议：

1. 尝试补充收集证据：

   • 书面证据：尽管当前可能没有直接的借条或欠条，但可以尝试寻找其他书面形式的证据，如聊天记录、邮件、短信等，其中可能包含对方承认借款或承诺还款的内容。
   • 证人证言：如果有第三方见证了借款过程或对方承认借款的事实，可以尝试联系这些证人，并请他们提供证言。
   • 录音录像：如果与对方有过关于借款的对话，且对话内容被合法录制下来，这也可以作为证据使用。但需注意，录音录像的收集必须合法，不能侵犯他人的隐私权。

2. 考虑其他法律途径：

   • 如果借款是通过银行转账或第三方支付平台进行的，可以尝试通过这些平台的交易记录来证明借款事实。这些记录通常具有较高的证明力，因为它们是由第三方机构提供的，且难以伪造。
   • 如果对方有还款行为，即使只是部分还款，也可以作为对方承认借款事实的证据。因此，要保留好所有与还款相关的记录。

3. 法律程序与诉讼风险：

   • 在没有充分证据的情况下提起诉讼，可能会面临败诉的风险。因为法院在审理案件时，需要依据证据来认定事实。如果证据不足，法院可能无法支持你的诉讼请求。
   • 即使证据不足，也可以尝试向法院提起诉讼，并在诉讼过程中积极补充证据。有时候，通过法院的调查取证程序，可能会发现一些之前未注意到的证据。但需注意，这需要一定的法律知识和诉讼技巧，且可能耗费较多的时间和精力。

4. 非诉讼解决方式：

   • 尝试与对方协商：在没有证据的情况下，协商可能是一个更为实际的选择。可以尝试与对方沟通，看是否能够达成还款协议。在协商过程中，可以尽量引导对方承认借款事实，并保留好协商的记录。
   • 寻求调解或仲裁：如果协商无果，可以考虑寻求第三方调解或仲裁机构的帮助。这些机构通常具有专业的调解或仲裁能力，可以帮助双方达成和解或作出裁决。但需注意，调解或仲裁的结果通常不具有强制执行力，如果对方不履行调解或仲裁结果，可能还需要通过诉讼来强制执行。

行动建议：

• 先尝试补充收集证据，尤其是那些容易被忽视的书面证据、证人证言或录音录像。
• 如果证据确实不足，可以考虑与对方协商或寻求第三方调解/仲裁机构的帮助。
• 如果决定提起诉讼，建议先咨询专业律师的意见，评估诉讼风险和可行性。

最后需要强调的是，每个案件的具体情况都是独特的，因此上述建议可能并不适用于所有情况。如果你面临类似的问题，建议直接向我咨询，以便我能根据你的具体情况提供更具体的法律建议。