结论：男女双方都有家庭的情况下自愿同居，这一行为本身在大多数情况下并不直接构成违法，但可能引发一系列严重的法律和社会问题。特别是当双方以夫妻名义共同生活时，将可能构成重婚罪，需承担刑事责任。以下是对此问题的详细分析：

一、法律层面分析

1. 民事法律问题

   • 违反夫妻忠实义务：我国法律规定，夫妻间有互相忠实的义务。若一方在与他人同居时违反了此义务，尤其在离婚诉讼中，无过错方有权要求损害赔偿，这包括物质和精神两方面的赔偿。例如，因另一方同居行为导致的精神痛苦，无过错方可请求精神损害抚慰金。
   • 侵犯配偶财产权：在同居期间，若一方擅自使用夫妻共同财产对同居对象进行大额赠与，这种处分可能因侵犯了配偶的平等处分权而被视为无效，配偶有权利要求返还相关财产。

2. 刑事法律问题

   • 重婚罪：若双方以夫妻名义公开同居生活，则可能触犯重婚罪。根据《中华人民共和国刑法》的相关规定，犯重婚罪的，将面临二年以下有期徒刑或者拘役的刑事处罚。重要的是要区分，单纯的同居行为（不以夫妻名义）通常只在民事领域进行调整，而一旦构成重婚，则将面临严厉的刑事处罚。

二、社会与道德层面分析

• 对婚姻家庭的影响：这种同居关系不仅可能对各自的婚姻家庭造成深远影响，如导致离婚、财产分割等复杂纠纷，还可能在社会和道德层面上遭受广泛的谴责。此类行为对个人的名誉、家庭关系以及社会关系均可能造成不可逆转的损害。
• 矛盾冲突处理复杂：若因这种关系产生矛盾或冲突，其处理过程往往极为复杂且敏感，可能涉及多方面的法律和社会资源。

三、建议与风险提示

1. 谨慎考虑行为后果：虽然双方都有家庭但自愿同居的行为在某些情况下并不直接构成违法，但其潜在的法律风险和社会后果却不容忽视。因此，在做出此类决定前，应充分考虑其行为可能带来的长远影响。
2. 遵守法律法规：特别是要避免以夫妻名义共同生活，以免触犯重婚罪等刑事法律条款。同时，也要尊重配偶的财产权，避免擅自处分夫妻共同财产。
3. 寻求专业法律咨询：如果你或你身边的人正面临类似情况，建议寻求专业的法律咨询，以便更好地了解相关法律规定和潜在风险，从而做出明智的决策。

总结来说，男女双方都有家庭的情况下自愿同居，虽然不直接违法，但可能引发一系列严重的法律和社会问题。因此，我强烈建议各方在做出此类决定前，充分考虑其行为可能带来的长远影响，并遵守相关法律法规，以避免不必要的法律纠纷和社会困扰。如果你有任何具体的法律问题或需要进一步的法律建议，请随时向我咨询。