双方都有家庭却在一起居住，这一行为本身并不直接构成犯法，但可能涉及多方面的法律问题和道德考量。以下是对此行为的详细法律分析：
民事法律责任
- 婚姻过错责任：该行为违反了夫妻间的忠实义务。若其中一方的配偶因此提起离婚诉讼，出轨方通常被视为过错方。在财产分割时，法院可能会倾向于保护无过错方的权益，使过错方少分财产。具体比例可能因案件情况而异，但过错方少分得20%到30%的夫妻共同财产是较为常见的情形。
- 损害赔偿责任：无过错方有权依据《民法典》要求过错方进行损害赔偿，包括物质损害和精神损害赔偿。例如，因对方出轨导致无过错方精神受损并产生治疗费用，这些均可作为损害赔偿的依据。
刑事法律责任
- 重婚罪：若两人以夫妻名义共同生活，且被周围人视为夫妻关系，则可能构成重婚罪。根据《刑法》第二百五十八条，犯重婚罪的，可被处以二年以下有期徒刑或拘役。具体判定需依据证据和法律规定，如同居、共同生育子女等行为都可能成为认定重婚的依据。
- 破坏军婚罪（特殊情况）：若其中一方配偶为现役军人，则该行为可能涉嫌破坏军婚罪。根据《刑法》第二百五十九条，明知是现役军人的配偶而与之同居或结婚的，可被处以三年以下有期徒刑或拘役。
道德与社会责任
- 除法律层面外，这种行为还可能对两个家庭的成员造成情感伤害，并引发社会舆论的压力。它可能破坏原有的婚姻关系，对子女造成心理和情感上的伤害，甚至导致社会舆论的谴责和道德上的压力。
针对不同情况的建议：
- 若双方仅是同居，并未以夫妻名义共同生活：虽然不构成重婚罪，但违反了《民法典》中关于夫妻忠实义务的规定。若因此导致离婚，出轨方可能面临财产分割上的不利后果和损害赔偿责任。
- 若双方以夫妻名义共同生活：则可能构成重婚罪，面临刑事处罚。同时，该行为也违反了《民法典》中关于禁止重婚的规定，若因此导致离婚，出轨方同样可能面临财产分割上的不利后果和损害赔偿责任。
- 若涉及现役军人配偶：则可能涉嫌破坏军婚罪，面临更严厉的刑事处罚。
总结与建议：
双方都有家庭却在一起居住的行为，虽然不直接触犯刑法（除非构成重婚罪或破坏军婚罪），但可能引发一系列民事和刑事责任，以及道德和社会层面的考量。因此，在面对此类情况时，应谨慎行事，充分考虑到可能的法律后果和社会影响。若已陷入此类关系，建议尽快结束，并寻求专业的法律和心理帮助，以减轻对家庭成员的伤害，并维护社会的公序良俗。如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。