结论：开车把对方后视镜壳撞掉了，若驾驶人确实没有留意到并正常驶离现场，通常不构成交通肇事逃逸。然而，是否构成逃逸需结合具体情况判断，包括剐蹭的明显程度、驾驶人是否有可能意识到事故等。

详细分析：

1. 不构成逃逸的情况：

   • 主观无故意：如果驾驶人确实没有留意到后视镜壳被撞掉，即主观上没有逃避法律责任的故意，只是正常地驶离了现场，这种情况一般不认定为逃逸。例如，在车流量较大、环境嘈杂的路段，轻微的后视镜剐蹭可能产生的震动和声音较小，容易被驾驶人忽略。
   • 证据支持：若被对方当事人或交警部门怀疑逃逸，驾驶人需要提供证据证明自己确实没有留意到事故发生，如行车记录仪的视频、现场证人证言等，以避免被错误认定为逃逸。

2. 可能被认定为逃逸的情况：

   • 明知故犯：如果有证据表明驾驶人应当知道发生了剐蹭，比如剐蹭声音很明显、对方车辆有鸣笛示意等，但驾驶人仍然直接驾车离开现场，这种情况下就有可能被认定为逃逸。因为从这些迹象来看，驾驶人主观上可能存在逃避责任的故意。
   • 后续态度：即使驾驶人在初始时未意识到发生了剐蹭，但在后续得知情况后，如果采取逃避、不配合处理等态度，也可能被视为有逃避法律责任的意图，从而构成逃逸。

3. 驾驶员的责任与义务：

   • 立即停车保护现场：无论是否构成逃逸，发生交通事故后，驾驶员都应立即停车，保护现场，这是每个驾驶员应尽的责任和义务。
   • 报警或通知相关部门：驾驶员应立即报警或通知保险公司等相关部门进行处理，以便及时调查事故原因，确定责任归属。
   • 承担赔偿责任：如果因为驾驶人的过失导致他人财产受损，驾驶人应当承担相应的赔偿责任。这既是法律规定的义务，也是道德上的要求。

建议与提醒：

• 驾驶过程中应时刻保持警惕，遵守交通规则，确保行车安全。安装并使用行车记录仪等设备可以记录行车过程，为可能发生的交通事故提供有力证据。
• 在发生事故后，应积极面对并妥善处理。即使当时未意识到发生了事故，但在得知情况后，应立即与对方联系，协商赔偿事宜，以维护自身和他人的合法权益。
• 若对事故责任有争议，可寻求交警部门的帮助进行责任认定，并依据认定结果进行相应处理。

如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。