在诈骗案中，即便没有确切的书面证据证明为何要转钱给对方，且对方仅通过电话形式沟通，这并不意味着无法追究其法律责任。以下是从不同角度对此问题的分析：
证据形式的多样性：
- 在法律上，证据并不仅限于书面形式。口头证据、电子数据（如通话记录、短信、微信聊天记录等）、证人证言等都可以作为证据使用。因此，即便没有书面证据，如果存在通话记录、转账记录等其他形式的证据，仍然有可能证明诈骗行为的存在。
电话沟通的法律效力：
- 电话沟通本身具有法律效力。如果通过电话进行了诈骗行为的诱导或指示，并且有相应的通话记录作为证据，那么这些通话记录就可以作为证明诈骗行为的关键证据。关键在于如何获取和保存这些通话记录，以及如何通过其他证据（如转账记录、受害者陈述等）来佐证这些通话记录的真实性和关联性。
诈骗行为的构成要件：
- 诈骗行为的构成要件包括：行为人实施了欺骗行为、使对方产生了错误认识、对方基于错误认识处分了财产、行为人或第三人获得了财产、以及被害人的财产受到了损害。即便没有书面证据，如果能够通过其他证据证明这些构成要件的存在，那么仍然可以认定诈骗行为的成立。
法律程序中的举证责任：
- 在法律程序中，举证责任通常由主张权利的一方承担。在诈骗案中，如果受害者主张自己被诈骗，那么受害者需要提供足够的证据来证明诈骗行为的存在。然而，这并不意味着受害者必须提供书面证据。如前所述，其他形式的证据同样可以被接受和认可。
实际案例中的证据运用：
- 在实际案例中，很多诈骗案都是通过电话、网络等非书面形式进行的。在这些案例中，警方和法院通常会通过调取通话记录、转账记录、网络聊天记录等证据来证明诈骗行为的存在。因此，即便没有书面证据，只要能够提供其他形式的证据来证明诈骗行为，仍然有可能追究犯罪嫌疑人的法律责任。
针对您的情况，我建议您：
- 尽快收集证据：包括通话记录、转账记录、与对方的聊天记录等。这些证据将有助于证明诈骗行为的存在。
- 向警方报案：将您所掌握的证据提交给警方，并配合警方的调查工作。警方将会根据您提供的证据进行进一步的调查和取证。
- 咨询专业律师：在处理此类案件时，咨询专业律师的意见是非常重要的。律师可以根据您的具体情况提供法律建议和指导，帮助您更好地维护自己的合法权益。
最后，需要强调的是，法律程序是一个复杂而严谨的过程。在处理诈骗案时，务必保持冷静和理性，积极配合警方和律师的工作，以便更好地追究犯罪嫌疑人的法律责任并维护自己的合法权益。如果您有任何法律问题或需要进一步的法律帮助，请直接向我咨询。