结论：在无直接证据的情况下起诉他人造谣确实存在一定难度，但并非完全不可行。关键在于能否通过其他方式收集到足够的证据来支持你的主张。以下是对此问题的详细分析：
一、民事起诉的角度
证据要求：
- 在民事诉讼中，你需要证明造谣者实施了编造并传播虚假信息的行为，以及这一行为对你的名誉权、荣誉权等民事权益造成了损害。
- 证据可以包括书面文字、网络帖子、音频、视频等，这些证据需要能够直接或间接证明造谣者的行为及其后果。
无直接证据的情况：
- 如果你没有直接的证据，如造谣者的书面承认或录音录像等，那么你需要通过其他方式收集证据。
- 例如，你可以尝试联系目击者或知情人士，获取他们的证言；或者收集网络上的相关评论、转发记录等，以证明造谣信息的传播范围和影响。
法律责任：
- 如果胜诉，造谣者需承担停止侵害、恢复名誉、消除影响、赔礼道歉及赔偿损失等责任。
二、刑事自诉的角度
适用情形：
- 当造谣行为情节严重时，可能涉嫌诽谤罪。根据《中华人民共和国刑法》，故意捏造并散布虚构事实，足以贬损他人人格、破坏他人名誉，且情节严重的行为构成诽谤罪。
“情节严重”的界定：
- 这包括多次捏造事实诽谤他人、造成他人人格和名誉严重损害、造成恶劣社会影响、致他人精神失常或自杀等后果。
无直接证据的挑战：
- 在刑事自诉中，证据的要求更为严格。如果没有直接证据，证明造谣者存在故意或重大过失，以及其行为与损害结果之间的因果关系，将面临更大的挑战。
- 但同样，你可以通过收集其他间接证据，如网络传播记录、目击者证言等，来支持你的主张。
三、刑事公诉的角度（如适用）
适用情形：
- 若造谣行为严重扰乱社会秩序，危害国家利益，则属于公诉案件。此时，由公安机关立案侦查，人民检察院提起公诉。
证据收集：
- 在公诉案件中，证据的收集主要由公安机关进行。但如果你认为造谣行为符合公诉条件，你可以向公安机关报案，并提供你所掌握的证据线索。
四、建议与策略
收集证据：
- 无论选择民事起诉还是刑事自诉，收集证据都是关键。你可以尝试通过多种途径收集证据，如联系目击者、保存网络记录等。
咨询专业律师（此处理解为向用户表明我作为律师可提供的帮助）：
- 作为专业律师，我可以协助你分析案情，制定合适的诉讼策略，并指导你如何收集和使用证据。
考虑其他途径：
- 如果直接起诉存在困难，你还可以考虑通过其他途径解决纠纷，如向网络平台投诉、要求造谣者删除不实信息等。
总结与进一步行动建议：在无直接证据的情况下起诉他人造谣确实面临挑战，但并非不可行。关键在于能否通过其他方式收集到足够的证据来支持你的主张。如果你认为自己遭受了造谣行为的侵害，并希望维护自己的合法权益，建议你尽快收集证据，并向我咨询具体的诉讼策略。我将根据你的具体情况，为你提供专业的法律建议和帮助。