面对诈骗案件中仅有证人而没有直接证据的情况，您确实面临一定的挑战，但并非无法应对。以下是一些详细且具有操作性的建议，帮助您在这种情况下维护自己的合法权益：

一、立即报案并详细陈述

首先，您应立即向当地公安机关报案，并尽可能详细地描述诈骗事件的经过。包括诈骗发生的时间、地点、诈骗手段、涉及金额以及您所知道的诈骗分子的相关信息。即使目前证据不足，公安机关也会根据您的报案情况展开初步调查，并可能采取进一步措施来收集证据。

二、梳理并保留现有线索

尽管您可能没有直接的物证或书证，但您仍应仔细梳理与诈骗行为相关的所有线索。例如：

• 交易记录：查看银行转账记录、电子支付记录、消费凭证等，明确资金流向，这些记录可能成为间接证据。
• 通讯记录：检查与诈骗分子的通话记录、短信、即时通讯软件聊天记录等，留意关键对话内容，这些也可能为案件提供线索。
• 书面文件：保留与诈骗相关的合同、协议、借条、收据等书面文件，即使它们不是直接证据，也可能对案件调查有帮助。

三、积极搜集证人证言及其他辅助证据

• 证人证言：寻找可能的证人，如目击者或其他了解诈骗过程的人，获取他们的证言。证人的陈述可以作为间接证据，支持您的报案。
• 监控录像：查看事发地点周围是否有监控摄像头，申请调取相关监控录像。监控录像可能直接记录诈骗过程，是极具价值的证据。
• 录音录像：如果您在与诈骗分子的通话或交流过程中有录音、录像，应妥善保存作为重要证据。

四、配合公安机关调查

在公安机关调查过程中，您应积极响应调查要求，提供进一步的证据和信息。协助警方进行辨认、指认等调查工作，并了解并尊重公安机关的调查程序和时间表。您的配合将有助于案件的顺利侦破。

五、联系银行及相关机构

如果诈骗涉及资金转移，您应及时联系开户银行说明情况，提供相关交易记录和线索。银行可能能够协助您追踪资金流向，为案件调查提供重要帮助。同时，您也可以向消费者协会或相关行业监管部门投诉举报，特别是在消费过程中遭遇诈骗时。

六、寻求法律援助

如果您对法律程序不熟悉或需要专业建议，应寻求有资质和经验的律师或法律机构的帮助。律师可以提供法律咨询、协助诉讼等服务，帮助您了解自己的权利和义务，并制定合适的应对策略。

七、注意证据的合法性

在搜集证据的过程中，务必确保所有手段都符合法律法规的规定。非法手段获得的证据可能无法得到认可，甚至可能导致法律责任。因此，您应始终遵循合法途径来搜集和保留证据。

总结与建议：

面对仅有证人而没有直接证据的诈骗案件，您应保持冷静并采取积极的应对措施。及时报案、梳理并保留现有线索、积极搜集证人证言及其他辅助证据、配合公安机关调查、联系银行及相关机构、寻求法律援助以及注意证据的合法性都是至关重要的步骤。通过这些努力，您可以最大限度地保护自己的合法权益，并为案件的侦破和起诉提供有力支持。