如果男女双方都构成遗弃罪，那么双方都将面临法律的制裁，具体量刑将根据各自遗弃行为的恶劣程度、造成的后果等因素来综合判定，但一般处五年以下有期徒刑、拘役或者管制。以下是对此问题的详细分析：

一、遗弃罪的定义与构成要件

遗弃罪是指负有扶养义务的人，对年老、年幼、患病或者其他没有独立生活能力的人实施拒绝扶养，情节恶劣的行为。其构成要件包括：

1. 主体要件：犯罪主体为对被遗弃者负有法律上的扶养义务且具有抚养能力的人。在夫妻关系中，双方互负扶养义务，因此都可能成为遗弃罪的主体。
2. 主观要件：行为人明知自己应当履行扶养义务而拒不履行，具有故意的主观心态。
3. 客体要件：侵犯的客体是被害人在家庭成员中的平等权利，具体表现为被害人因行为人的遗弃行为而无法获得必要的扶养和照顾。
4. 客观要件：表现为对年老、年幼、患病或其他没有独立生活能力的家庭成员，应当扶养而拒绝扶养的行为。这种行为通常表现为经济上不供养、生活上不照料、精神上不慰藉等。

二、遗弃罪的“情节恶劣”认定

在实际司法实践中，“情节恶劣”是判定遗弃罪是否成立的关键因素。通常，法院会综合考虑以下几个方面来判断遗弃行为的恶劣程度：

1. 遗弃行为的持续时间：长期持续的遗弃行为，如将配偶长时间留在家中无人照料，导致其生活陷入困境，通常被视为情节恶劣。
2. 遗弃造成的后果：遗弃行为导致的严重后果，如被遗弃者重伤、死亡或精神失常等，也是判断情节恶劣的重要依据。
3. 遗弃的手段和方式：采用极端、残忍手段进行遗弃，如在恶劣天气条件下将生活不能自理的配偶遗弃在户外，同样会被认定为情节恶劣。

三、男女双方都构成遗弃罪的情况

在男女双方都构成遗弃罪的情况下，法院会分别对双方的遗弃行为进行审查，并根据各自行为的恶劣程度、造成的后果等因素来综合判定量刑。由于遗弃罪是针对个体的犯罪行为，因此双方不会因为对方的遗弃行为而减轻或免除自己的刑事责任。

四、遗弃罪的量刑标准

根据《中华人民共和国刑法》第二百六十一条的规定，对于犯遗弃罪的，将处五年以下有期徒刑、拘役或者管制。具体的刑罚力度会根据犯罪情节的严重程度、被告人的主观恶性以及社会危害程度等因素来综合考量。

五、法律建议

1. 及时报案：如果遭遇遗弃行为，建议及时向公安机关报案，以便警方及时介入调查。
2. 收集证据：在报案前或报案过程中，尽量收集相关证据，如遗弃行为的照片、视频、证人证言等，以便为后续的司法程序提供有力支持。
3. 寻求法律帮助：在处理遗弃罪案件时，建议寻求专业律师的帮助，以便更好地维护自己的合法权益。

作为林荔枝律师，我专注于婚姻家庭等领域的法律事务。如果你或你身边的人遭遇了遗弃行为或其他婚姻家庭方面的问题，可以直接向我咨询，我会为你提供专业的法律建议和帮助。