面对男方家暴但在离婚时没有直接证据的情况，您仍然有多种途径来维护自己的权益并争取离婚。以下是一些具体的建议：

一、尝试与男方协商

首先，您可以尝试与男方进行协商，表明自己因遭受家暴而无法继续共同生活，看是否能达成离婚的一致意见。如果男方同意，那么可以直接办理离婚手续。

二、收集间接证据

虽然没有直接证据，但您可以努力收集间接证据来形成证据链，以证明男方存在家暴行为。这些间接证据包括但不限于：

1. 证人证言：邻居、亲友等如果目睹了家暴情况，可以请他们提供证言。
2. 就医记录：因家暴受伤而去医院就医的诊断证明、病历、伤处照片等。
3. 报警记录：如果曾经因为家暴报过警，警方的出警记录、询问笔录等也是重要证据。
4. 相关物品：被损坏的衣物、家具等与家暴相关的物品，也可以作为辅助证据。

三、向法院提起诉讼

如果协商不成，您可以向法院提起诉讼离婚。在诉讼过程中，您可以：

1. 详细陈述家暴情况：向法院详细陈述自己遭受家暴的经过，包括时间、地点、具体行为等。
2. 提交间接证据：将收集到的间接证据提交给法院，形成证据链以证明家暴事实。
3. 申请法院调查取证：为了更好地保障自己的权益，您可以申请法院进行调查取证，如调取警方的出警记录、医院的就诊记录等。

四、争取相关权益

在离婚诉讼中，您还可以争取以下权益：

1. 共同财产分割：虽然家暴证据缺失，但您可以从其他方面证明自己对家庭的贡献，要求适当多分财产。
2. 子女抚养权：如果有子女，您可以主张抚养权，并证明自身更适合抚养子女，如经济稳定、有良好居住环境等。
3. 离婚赔偿：虽然无直接家暴证据，但您仍可尝试与男方协商赔偿事宜。若协商不成且证据不足，诉讼中获得赔偿的可能性相对有限，但您可以在分割夫妻共同财产时，向法院说明男方可能存在的家暴行为，争取适当多分财产作为补偿。

总之，即使在没有直接证据的情况下，您仍然可以通过收集间接证据、向法院提起诉讼等方式来维护自己的权益并争取离婚。同时，建议您在整个过程中保持冷静和理智，寻求专业律师的帮助和支持。