在打架事件中，如果当时没有直接证据，处理起来确实会比较复杂，但并非完全没有办法。以下是一些建议，希望能帮助你更好地应对这种情况：

首先，尽管没有直接证据，但你可以尝试收集间接证据来支持你的说法。这些间接证据可以包括：

• 现场监控视频：如果打架地点附近有监控摄像头，你可以尝试联系相关部门或机构，调取监控视频。即使画面不够清晰，也可能提供一些有用的线索。
• 证人证言：如果有目击者见证了打架过程，你可以请求他们提供证言。多个证人的陈述相互印证，可以形成一定的证据链。
• 现场遗留物品：打架现场可能遗留一些与案件相关的物品，如凶器、衣物碎片等。这些物品也可以作为间接证据来使用。

其次，你可以向公安机关报案，并请求他们进行调查。公安机关有权采取多种侦查手段，如询问当事人、证人，了解事件经过；进行伤情鉴定等。他们的专业调查可能会发现一些你未曾注意到的线索或证据。

在报案和调查过程中，你需要保持冷静和配合。向警方如实陈述事件经过，提供你所知道的所有信息和线索。同时，也要尊重警方的调查程序和决定。

如果经过调查后，仍然无法找到足够的证据来证明打架事实，那么可能无法对违法行为人进行治安处罚或刑事立案。但请注意，即便当时没有证据，后续如果出现新证据，你仍然可以向警方提供，并请求他们重新评估处理。

最后，如果打架事件涉及民事赔偿问题，你需要尽量保留现场证据来支持你的诉求。如果没有证据支持你的诉求，那么在法院诉讼中可能会面临一些困难。因此，在发生打架事件后，务必尽量保留现场证据，以维护自身的合法权益。

总之，虽然打架时没有直接证据会增加处理的难度，但只要你积极收集间接证据、配合警方调查、并尽量保留现场证据，仍然有可能维护自身的合法权益。