被人辱骂一般不能构成正当防卫，直接动手反击通常不被视为正当防卫行为。下面我从几个方面详细解释一下：

一、正当防卫的构成要件

根据《中华人民共和国刑法》第二十条的规定，正当防卫是指为了使国家、公共利益、本人或者他人的人身、财产和其他权利免受正在进行的不法侵害，而采取的制止不法侵害的行为。要构成正当防卫，必须同时满足以下条件：

1. 存在现实的不法侵害：这种不法侵害必须是现实存在的，且具有紧迫性、攻击性，可能对人身安全等造成现实危害。辱骂行为虽然侵犯了他人的人格尊严和名誉权，但并不构成直接的、危及人身安全的暴力侵害。
2. 不法侵害正在进行：防卫行为必须在不法侵害进行的过程中实施，如果侵害已经结束或者尚未开始，那么防卫行为就不具有正当性。
3. 目的是防卫：防卫行为必须是为了保护合法权益而进行，不能是为了报复或者故意挑衅。
4. 针对不法侵害人：防卫行为只能针对实施不法侵害的人，不能对无辜的第三人进行防卫。
5. 限度适当：防卫行为必须在必要限度内进行，如果明显超过必要限度造成重大损害，就属于防卫过当，应当负刑事责任。

二、辱骂行为与正当防卫的关系

辱骂行为主要侵犯的是他人的人格尊严和名誉权，它并不直接对受辱者的人身或财产造成实质性、紧迫性的不法侵害。因此，在面对辱骂时，如果直接动手反击，这往往会被视为双方的互殴行为，而不是正当防卫。因为互殴中双方都有伤害对方的故意和行为，这与正当防卫的防卫目的相悖。

三、特殊情况下的考量

虽然一般情况下辱骂行为不构成正当防卫的前提，但在某些特殊情况下，如果辱骂行为伴随着具有攻击性的动作或姿态，使受辱者有理由相信自己即将面临身体上的伤害，且这种伤害是紧迫的，那么在这种情况下采取的必要的制止行为，有可能被认定为正当防卫。但这需要具体情况具体分析，并由司法机关进行最终判定。

四、应对辱骂行为的建议

1. 保持冷静：在受到辱骂时，首先要做的是保持冷静，不要让情绪控制自己的行为。冲动之下的回应可能会加剧冲突，甚至导致不必要的法律后果。
2. 明确表达立场：用平和但坚定的语气告诉对方，他们的行为是不恰当的，你无法接受这样的对待，并要求对方停止辱骂。
3. 寻求帮助：如果现场有其他人，可以请求他们协助制止辱骂行为，或者作为见证人记录事件经过。如果对方持续辱骂，甚至升级为威胁或暴力行为，应立即报警，让警方介入处理。
4. 依法维权：如果辱骂行为对你造成了严重的精神损害或其他损失，你可以通过法律途径来维护自己的名誉权和人格尊严。根据《中华人民共和国民法典》的相关规定，你有权要求侵权人承担民事责任，包括停止侵害、赔礼道歉、赔偿损失等。

总之，面对辱骂等言语攻击时，我们应保持冷静和理智，通过合法途径解决问题，而不是采取暴力手段。如果你有任何法律问题或需要进一步的法律帮助，请直接向我咨询。