结论：不可以因为别人无故骂你就打他巴掌，这种行为可能构成违法甚至犯罪，同时你也可能因此承担相应的法律责任。
分析：
法律角度：
- 人格权保护：每个人都有名誉权、人格尊严等人格权，受到法律的保护。无故辱骂他人确实侵犯了他人的人格权，被辱骂者有权要求辱骂者停止侵害、赔礼道歉，甚至可以寻求法律途径进行维权。
- 正当防卫的界限：虽然被辱骂时可能会感到愤怒和屈辱，但打人巴掌并不属于正当防卫的范畴。正当防卫通常要求针对正在进行的不法侵害，采取必要的、合理的防卫行为。而打人巴掌往往超出了必要的限度，可能构成故意伤害。
- 法律责任：打人巴掌如果造成对方身体伤害，即使伤害不严重，也可能违反《治安管理处罚法》，面临行政处罚，如罚款、拘留等。如果伤害严重，构成轻伤或重伤，还可能触犯《刑法》，承担刑事责任。
道德和社会角度：
- 以暴制暴不可取：面对辱骂，以暴力回应不仅不能解决问题，反而可能加剧矛盾，导致更严重的后果。
- 寻求合理解决途径：被辱骂时，可以选择报警、向相关部门投诉或寻求法律援助等合理途径来维护自己的权益。
建议：
- 保持冷静：面对辱骂时，尽量保持冷静，不要冲动行事。
- 收集证据：如果可能的话，收集辱骂的证据，如录音、录像或目击者证言等，以便后续维权。
- 寻求帮助：及时向警方、社区或相关机构报告，寻求他们的帮助和支持。
- 法律维权：如果辱骂行为严重侵犯了你的权益，可以考虑通过法律途径进行维权，如起诉辱骂者要求赔偿损失等。
总之，面对无故辱骂，打人巴掌并不是解决问题的正确方式。我们应该通过合法、合理的途径来维护自己的权益，而不是采取暴力手段。如果你有任何法律问题或需要进一步的法律帮助，可以直接向我咨询。