侵犯别人肖像权后被对方辱骂，辱骂行为本身可能违法，需根据辱骂的具体情节和后果来判断法律责任。以下从不同角度为你详细分析：
一、辱骂行为可能涉及的法律责任
民事责任：
- 如果辱骂行为对您的名誉造成了损害，您有权要求辱骂者承担民事责任，包括停止侵害、赔礼道歉以及赔偿损失等。这里的损失可能包括精神损害赔偿，具体数额会根据辱骂行为的性质、情节以及对您造成的实际影响等因素来确定。
行政责任：
- 根据《中华人民共和国治安管理处罚法》第四十二条的规定，公然侮辱他人或者捏造事实诽谤他人的，处五日以下拘留或者五百元以下罚款；情节较重的，处五日以上十日以下拘留，可以并处五百元以下罚款。因此，如果辱骂行为构成了公然侮辱，辱骂者可能会面临行政处罚。
刑事责任：
- 在极端情况下，如果辱骂行为严重到构成犯罪的程度，如通过信息网络实施公然侮辱或诽谤行为，且情节严重，辱骂者可能会触犯刑法中的侮辱罪或诽谤罪，面临刑事处罚。
二、侵犯肖像权与辱骂行为的法律关系
- 侵犯肖像权和辱骂行为是两个独立的法律行为，它们各自承担相应的法律责任。即使您先侵犯了他人的肖像权，这并不意味着对方可以随意辱骂您。对方应当通过合法途径来维护自己的权益，如要求您停止侵害、赔偿损失等，而不是采取辱骂等违法行为。
三、建议与措施
对于侵犯肖像权的行为：
- 如果您确实侵犯了他人的肖像权，建议您立即停止侵害行为，并与对方协商解决赔偿事宜。如果无法协商，对方可能会通过法律途径来维护自己的权益。
对于辱骂行为：
- 如果您遭受了辱骂，建议您保留相关证据，如聊天记录、录音等，以便在需要时证明对方的违法行为。同时，您可以考虑向公安机关报案或向法院提起民事诉讼，要求辱骂者承担相应的法律责任。
举例说明：假设您未经允许使用了某人的肖像进行商业宣传，这构成了侵犯肖像权。随后，该人发现后对您进行了辱骂。在这种情况下，您需要为侵犯肖像权的行为承担民事责任；而对方则需要为辱骂行为承担相应的法律责任，无论是民事责任、行政责任还是刑事责任，都取决于辱骂的具体情节和后果。
总结与提醒：在日常生活中，我们应当尊重他人的肖像权和名誉权，避免任何形式的侵权行为。如果遇到纠纷或冲突，应当通过合法途径来解决问题，而不是采取违法行为。如果您有任何法律问题或需要进一步的法律帮助，请直接向我咨询。