结论：两个人都有家庭却在一起，这一行为本身在大多数情况下并不直接构成违法，但可能引发一系列民事、刑事责任以及道德和社会层面的考量。以下是对此行为的详细分析：
一、民事法律责任
婚姻过错责任：
- 该行为违反了夫妻间的忠实义务。若其中一方的配偶因此提起离婚诉讼，出轨方通常被视为过错方。在财产分割时，法院可能会倾向于保护无过错方的权益，使过错方少分财产。具体比例可能根据案件情况而定，例如，过错方可能少分得20%到30%的夫妻共同财产。
损害赔偿责任：
- 无过错方有权依据《民法典》要求过错方进行损害赔偿，这包括物质损害和精神损害赔偿。例如，因对方出轨导致无过错方精神受损并产生治疗费用，这些均可作为损害赔偿的依据。
侵犯配偶财产权：
- 在同居期间，若一方擅自使用夫妻共同财产对同居对象进行大额赠与，这种处分可能因侵犯了配偶的平等处分权而被视为无效。配偶有权利要求返还相关财产。
二、刑事法律责任
重婚罪：
- 若两人以夫妻名义共同生活，且被周围人视为夫妻关系，则可能构成重婚罪。根据《刑法》，犯重婚罪的，可被处以二年以下有期徒刑或拘役。具体判定需依据证据和法律规定，如同居、共同生育子女等行为都可能成为认定重婚的依据。
破坏军婚罪（特殊情况）：
- 若其中一方配偶为现役军人，则该行为可能涉嫌破坏军婚罪。根据《刑法》，明知是现役军人的配偶而与之同居或结婚的，可被处以三年以下有期徒刑或拘役。
三、道德与社会责任
- 除法律层面外，这种行为还可能对两个家庭的成员造成情感伤害，如导致离婚、子女抚养权争议等复杂纠纷。同时，它也可能引发社会舆论的压力，对个人的名誉、家庭关系以及社会关系均可能造成不可逆转的损害。
建议
- 谨慎行事：在面对此类情况时，双方应谨慎行事，充分考虑到可能的法律后果和社会影响。
- 法律咨询：如果你或你身边的人正面临此类问题，建议直接向我咨询，以便获得更具体、更专业的法律建议。
- 道德考量：除了法律层面，还应充分考虑道德和社会责任，尽量减轻对家庭成员的伤害，并维护社会的公序良俗。
综上所述，两个人都有家庭却在一起的行为，虽然不直接触犯刑法（除非构成重婚罪或破坏军婚罪），但可能引发一系列民事和刑事责任，以及道德和社会层面的考量。因此，在处理这类问题时，应全面、谨慎地考虑各种因素。