当两个人打架且没有直接目击证人时，处理起来确实会比较复杂，但并非无法解决。以下是一些建议来帮助您理解如何处理这种情况：

一、及时报警并收集现场证据

1. 报警：首先，应立即报警，让警方介入调查。警方有专业的调查手段和资源，能够展开全面的调查。
2. 收集现场证据：在等待警方到来的同时，如果条件允许，应尽可能收集现场的各种证据，如被打斗破坏的物品、血迹、攻击工具（如果安全的话）等。这些证据可能对于后续的调查和判断起到关键作用。

二、依靠监控视频和伤势鉴定

1. 查看监控视频：警方会调查事发现场及周边的监控视频资料，以期找到确凿证据来证实事实真相。因此，如果打架地点附近有监控设备，务必告知警方，以便他们能够及时调取相关视频。
2. 伤势鉴定：对参与打架的双方进行伤势鉴定也是至关重要的。这能够清晰地展示出伤害的严重程度以及产生原因，为后续的法律责任划分提供重要依据。

三、评估当事人陈述并结合其他证据

1. 当事人陈述：虽然缺乏目击证人，但当事人的陈述仍然具有一定的参考价值。然而，必须将其与其他证据相结合，以全面评估其真实性。
2. 结合其他证据：除了监控视频和伤势鉴定外，还可以考虑其他可能的证据来源，如双方的沟通记录（如微信、短信等）、在场人员的间接证据（如听到或看到的部分情况）等。

四、法律责任与处罚

1. 行政处罚：如果打架行为尚未达到触犯刑法的严重程度，根据《治安管理处罚法》的相关规定，可能会对违法者实施为期5至10天的行政拘留，并依法处以200元至500元不等的罚款。情节较轻或仅涉及轻微人身伤害的，处罚可能会更轻；而存在加重处罚情况（如造成重大人员伤亡等）的，则可能面临更严厉的处罚。
2. 刑事责任：如果打架行为导致他人受伤且伤情达到轻伤及以上程度，则可能触犯《刑法》中的故意伤害罪。此时，违法者需要承担相应的刑事责任，并可能面临有期徒刑、拘役或者管制等刑罚。

五、后续维权与协商

1. 维权途径：如果后续证据充足且能够证明对方的过错或责任更大，可以依据伤情及实际损失通过协商或民事诉讼要求对方承担相应的民事赔偿责任。
2. 协商解决：在某些情况下，双方可能愿意通过协商来解决问题。此时，协商过程和达成的协议也可以作为处理问题的重要依据。

综上所述，即使两个人打架没有直接目击证人，也可以通过及时报警、收集现场证据、依靠监控视频和伤势鉴定、评估当事人陈述并结合其他证据以及后续的法律责任与处罚等途径来处理和解决问题。