结论：两方都有家庭的情况下，单纯的关系存在并不直接构成犯法，但可能涉及多方面的法律问题和道德考量，具体需分情况讨论。

1. 民事法律责任角度：

   • 婚姻过错责任：若两方都有家庭却在一起，这一行为违反了夫妻间的忠实义务。若其中一方的配偶因此提起离婚诉讼，出轨方通常被视为过错方。在财产分割时，法院可能会倾向于保护无过错方的权益，使过错方少分财产。具体比例可能根据案件情况而定，例如，过错方可能少分得20%到30%的夫妻共同财产。
   • 损害赔偿责任：无过错方有权依据《民法典》要求过错方进行损害赔偿，这包括物质损害和精神损害赔偿。例如，因对方出轨导致无过错方精神受损并产生治疗费用，这些均可作为损害赔偿的依据。

2. 刑事法律责任角度：

   • 重婚罪：若两方以夫妻名义共同生活，且被周围人视为夫妻关系，则可能构成重婚罪。根据《刑法》的相关规定，犯重婚罪的，可被处以二年以下有期徒刑或拘役。具体判定需依据证据和法律规定，如同居、共同生育子女等行为都可能成为认定重婚的依据。
   • 破坏军婚罪（特殊情况）：若其中一方配偶为现役军人，则该行为可能涉嫌破坏军婚罪。根据《刑法》的相关规定，明知是现役军人的配偶而与之同居或结婚的，可被处以三年以下有期徒刑或拘役。

3. 道德与社会责任角度：

   • 除法律层面外，这种行为还可能对两个家庭的成员造成情感伤害，并引发社会舆论的压力。它可能破坏家庭关系，伤害无辜的配偶和子女，甚至影响社会的和谐稳定。

建议：

• 在面对此类情况时，双方应谨慎行事，充分考虑到可能的法律后果和社会影响。
• 若已涉及法律纠纷或可能面临法律风险，建议及时咨询专业律师（即我本人，李志刚律师，专注于婚姻家庭领域），以获取针对性的法律建议和帮助。
• 从道德和社会责任的角度出发，应尊重自己的婚姻和家庭，遵守道德规范和法律法规，以维护家庭的幸福和社会的和谐。

如有任何进一步的问题或需要具体的法律帮助，请直接向我咨询。