仅有银行转账记录及其用途说明，通常不足以直接起诉对方诈骗。具体分析如下：

一. 转账记录及其用途的法律意义

• 转账记录是资金交易的凭证，能够证明资金在账户之间的流转情况。
• 用途说明可能提供了转账的背景或原因，但不一定能证明对方的欺诈行为。

二. 诈骗罪的构成要件

• 根据《中华人民共和国刑法》第二百六十六条，诈骗罪需要满足以下条件：
  1. 诈骗公私财物，数额较大。
  2. 行为人具有非法占有的目的。
  3. 使用虚构事实或隐瞒真相的方法骗取财物。
• 仅有转账记录及其用途说明，不足以证明对方具有非法占有的目的或使用了欺诈手段。

三. 证据的充分性

• 要起诉诈骗，需要形成完整的证据链，包括但不限于转账记录、沟通记录（如短信、邮件、通话录音等）、证人证言等。
• 转账记录及其用途说明只是证据链中的一部分，还需要其他证据来辅助证明对方的欺诈行为。

四. 法律建议

• 我建议，如果你怀疑对方存在诈骗行为，应首先向公安机关报案，由公安机关进行调查侦查。
• 如果公安机关认为不构成刑事犯罪，你可以考虑根据民事法律关系，如不当得利等，向法院提起民事诉讼，要求对方返还钱款。但在民事诉讼中，你需要承担举证责任，提供充分的证据来支持你的诉求。

综上所述，仅有银行转账记录及其用途说明，通常不足以直接起诉对方诈骗。你需要收集更多证据来形成完整的证据链，以提高胜诉的几率。如有进一步需要，您可以继续咨询我。