结论：在没有证据证明男人动手的情况下，男人一般不会被拘留，但具体还需结合实际情况和证据综合判断。
分析说明：
拘留的法律依据：
- 根据《中华人民共和国治安管理处罚法》的相关规定，对于殴打他人或者故意伤害他人身体的行为，公安机关可以依法给予行政处罚，包括拘留。但这一处罚的适用前提是存在明确的违法行为和相应的证据支持。
证据的重要性：
- 在法律程序中，证据是认定事实和适用法律的基础。如果没有证据证明男人动手打了女人，那么公安机关就无法依据相关法律条款对男人进行处罚，包括拘留。
实际情况的综合判断：
- 尽管没有直接证据证明男人动手，但如果存在其他间接证据（如目击者证言、监控录像、伤情鉴定等）能够形成完整的证据链，指向男人确实参与了打架行为，那么公安机关可能会根据这些证据进行综合判断，并可能采取相应的法律措施。
- 另外，如果打架行为造成了严重的后果（如重伤、死亡等），或者男人有其他违法犯罪行为，那么即使没有直接证据证明他动手，也可能因为其他相关证据而被追究法律责任。
可能的法律后果：
- 在没有证据证明男人动手的情况下，他一般不会被拘留。但如果后续发现了相关证据，或者打架行为造成了严重后果，男人可能会面临行政处罚（如罚款、拘留）甚至刑事处罚（如故意伤害罪）。
建议与行动：
- 对于受害者：如果遭受了殴打或伤害，应尽快报警并寻求医疗救助。同时，尽量收集并保存相关证据（如照片、视频、目击者证言等），以便后续维权。
- 对于涉事男人：如果确实没有动手，应积极配合公安机关的调查，提供自己的证言和可能的证据来证明自己的清白。如果担心可能面临法律风险，可以咨询专业律师以获取法律帮助。
特殊场景提醒：
- 在打架现场，如果存在混乱或多人参与的情况，证据的收集可能会更加困难。因此，受害者应尽快报警并寻求帮助，以便公安机关能够及时介入并调查取证。
- 如果打架行为发生在公共场所或有监控录像覆盖的区域，那么监控录像可能会成为重要的证据来源。因此，在报警后，应尽快向公安机关提供这些线索。
如有更多疑问或需要进一步的法律帮助，请直接向我咨询。