发生交通意外后双方都离开现场，这一行为需要根据具体情况来判断其性质及法律后果。以下是从不同角度进行的分析：
若双方离开是为了采取合理措施：
- 行为界定：如果双方在事故发生后，为了采取合理措施如报警、求援或保护现场证据等而暂时离开，并且之后返回并积极配合处理事故，这种行为通常不被视为违法行为。
- 法律依据：根据《道路交通事故处理程序规定》的相关条款，当事人在确保安全的原则下，可以采取现场拍照或标划事故车辆现场位置等方式固定证据后，立即撤离现场，再协商处理损害赔偿事宜。在此过程中，为妥善处理事故而采取的合理行动是被允许的。
若双方离开是为了逃避法律追究：
- 行为界定：如果双方或其中一方在事故发生后离开现场的目的是为了逃避法律追究，则此行为构成肇事逃逸。
- 责任认定：根据《道路交通事故处理程序规定》，逃逸方在事故责任认定中通常会被认定承担全部责任，除非有证据证明对方当事人也有过错，此时可以减轻逃逸方的责任。
- 行政处罚：依据《中华人民共和国道路交通安全法》，造成交通事故后逃逸但尚不构成犯罪的，将由公安机关交通管理部门处以二百元以上二千元以下罚款，并可并处十五日以下拘留。
- 刑事处罚：若逃逸行为导致重大事故，致人重伤、死亡或使公私财产遭受重大损失，且逃逸者负有主要或全部责任，则根据《中华人民共和国刑法》的相关规定，逃逸者将面临三年以上七年以下有期徒刑的处罚；若因逃逸致人死亡，则将受到七年以上有期徒刑的严厉惩罚。
针对您的情况，我给出以下建议：
- 确保安全：在发生交通事故后，首先确保自身安全，避免进一步伤害。如果可能的话，将车辆移至不妨碍交通的地点。
- 记录信息：尽可能记录对方车辆信息、逃离方向等关键信息，为后续处理提供线索。这些信息对于警方调查和责任认定至关重要。
- 及时报警：立即报警并通知交警部门到场处理。保留现场证据，如拍照记录事故现场状况、车辆位置、受损情况等。这些证据将有助于警方了解事故经过并作出准确的责任认定。
- 法律途径：如果对方逃逸且未留下任何信息，您可以考虑通过法律途径维护自己的权益。例如，向法院提起诉讼要求对方赔偿损失等。在此过程中，我将为您提供专业的法律支持和建议。
最后，我想强调的是：交通意外发生后，双方应积极配合处理事故，而不是选择逃避。逃避责任不仅无法解决问题，还可能面临更严重的法律后果。如果您在处理此类问题时遇到任何疑问或需要进一步的法律帮助，请随时向我咨询。