当您遭遇借款诈骗却发现自己没有直接证据时，不要慌张，您仍然可以通过一系列措施来维护自己的权益，并尽可能地追回损失。以下是我为您详细梳理的步骤和建议：

一、立即报案

首先，无论您是否有直接证据，都应尽快前往最近的公安机关报案。报案时，请详细陈述诈骗的经过，包括诈骗发生的时间、地点、诈骗方式、对方联系方式以及涉及的金额等所有相关信息。这将有助于公安机关了解案情，并决定是否立案侦查。

二、积极收集证据

虽然您目前可能没有直接证据，但可以尝试从以下几个方面收集间接证据：

1. 回忆细节：静下心来仔细回忆诈骗过程，包括与诈骗分子的交流内容、对方的外貌特征、口音等细微情节。
2. 查找关联记录：检查您的通话记录、短信、社交软件聊天记录等，看是否有涉及诈骗的内容。即使当时没有留存，也可以尝试从云端备份或手机回收站中恢复。
3. 资金流动轨迹：查看您的银行账户或支付平台的交易记录，追踪资金的流动轨迹，这可能有助于发现诈骗分子的线索。
4. 周边监控：如果诈骗发生在公共场所或您家附近，可以尝试调取周边的监控录像，看是否有记录到相关场景。

三、配合公安机关调查

一旦公安机关决定立案，您将需要积极配合他们的调查工作。这可能包括提供您所收集到的所有证据和线索，以及根据需要协助公安机关进行辨认、指认等工作。

四、寻求法律援助

如果您在收集证据或处理案件过程中遇到困难，可以考虑咨询专业律师。律师可以为您提供专业的法律建议和指导，帮助您了解案件走向以及如何更有效地收集证据。如果案件进入司法程序，律师还可以代表您出庭应诉，为您争取最大的合法权益。

五、防止损失扩大

在处理案件的同时，您也需要采取一些措施来防止损失进一步扩大：

1. 挂失账户：如果涉及银行卡等资金账户安全，请立即挂失或冻结账户以防止资金被进一步盗取。
2. 提高防范意识：学习常见的诈骗手段和防范方法，增强自身的防范意识。
3. 防范二次诈骗：保持警惕，不要轻易相信陌生电话、信息或网络链接，防止诈骗分子利用您的身份信息进行二次诈骗。

总结

被诈骗但没有直接证据并不意味着您无法维护自己的权益。通过及时报案、积极收集间接证据、配合公安机关调查以及寻求法律援助等措施，您仍然有可能追回损失并追究诈骗分子的法律责任。同时，保持冷静和警惕，防止损失进一步扩大也是非常重要的。希望这些建议能对您有所帮助。