交通事故后双方都离开了现场，一般情况下仍可能被追究责任，但具体能否追究责任需根据事故的具体情况来判断。以下从不同角度为您详细分析：
一、轻微事故且未造成人员伤亡和重大财产损失的情况
如果交通事故属于轻微剐蹭等小事故，且双方均认为无大碍并离开现场，同时事后能协商解决并达成赔偿协议，那么通常可不再追究责任。这是因为这种情况下，事故后果相对较轻，双方自行协商解决较为便捷，且未对社会秩序和他人权益造成严重影响。不过，为了保险起见，双方在离开现场前应尽量确认情况，必要时可以拍照留存事故现场、车辆损坏情况等证据，或者有文字记录、证人证明双方当时确认无问题，以防后续产生纠纷。
二、造成人员伤亡或较大财产损失的情况
如果交通事故造成了人员伤亡或较大财产损失，即便双方离开了现场，也可能构成交通肇事逃逸等犯罪行为。在这种情况下，交警部门会通过调查等手段确定事故责任，并依法追究逃逸方的刑事责任和民事赔偿责任。这是为了维护法律的尊严和社会的公平正义，对严重违法行为进行惩处。
具体来说，如果一方存在逃逸等违法行为，要承担相应不利后果。一般在无法确定责任的事故中，逃逸方可能被认定承担全部或主要责任。因此，在发生交通事故后，无论事故大小，双方都应尽量留在现场，配合交警部门的调查和处理工作。
三、后续发现新问题的情况
如果事故发生时双方认为无大碍并离开现场，但后续一方发现有损失或伤情，比如身体隐匿性损伤、车辆部件后续出现故障等，且能证明与此次事故有关联，那么当初自行离开的当事人仍可能要承担相应责任。此时，受损方可以尝试联系对方协商解决。若无法联系或协商不成，可报警。警方会根据调查情况确定责任，比如通过调取事故现场周边监控、询问证人等方式还原事故经过。
四、私了协议的情况
如果双方在事故发生后选择了私了，并达成了赔偿协议，那么是否还会被追究责任取决于具体情况。如果私了协议不存在违法违规、显失公平等可撤销情形，一般按协议履行，不会再被追究。但如果私了时存在欺诈、胁迫等手段，使一方违背真实意愿签订协议，受损害方有权请求法院或仲裁机构撤销协议，之后按法律规定重新认定责任。另外，有些事故即便私了，若涉及刑事犯罪，如交通肇事罪致人员重伤、死亡或重大财产损失，即便私了，司法机关仍可依法追究刑事责任。
总结与建议：
如果您对交通事故责任认定、赔偿等问题还有更多疑问，可以直接向我咨询，我会为您提供专业的法律解答。