结论：您可以考虑通过法律途径来维护自己的权益，但具体能否成功“告他”以及后续的处理方式，需要根据实际情况来判断。

分析说明：

1. 对方行为性质：

   • 对方在擦伤您的车辆后，仅随便记了一个电话就离开，这种行为可能构成逃逸（如果对方明知发生事故而故意离开）。根据《中华人民共和国道路交通安全法》的相关规定，发生交通事故后，当事人应当立即停车、保护现场、抢救受伤人员，并迅速报告执勤的交通警察或者公安机关交通管理部门。如果对方未履行这些义务，可能面临行政处罚。

2. 您的权益：

   • 您作为车辆的所有者或使用者，在车辆受到损害时，有权要求对方承担赔偿责任。这包括车辆的维修费用、可能因事故导致的其他损失（如误工费、交通费等）。

3. 法律途径：

   • 报警处理：首先，您可以向当地公安机关交通管理部门报案，提供对方留下的电话号码以及其他可能的线索（如事故发生的时间、地点、对方车辆的特征等）。警方会进行调查，并根据调查结果采取相应的法律措施。
   • 民事诉讼：如果警方无法找到对方或者对方拒绝承担赔偿责任，您可以考虑向法院提起民事诉讼。在诉讼过程中，您需要提供充分的证据来证明对方的过错以及您因此遭受的损失。这可能包括事故现场的照片、维修发票、证人证言等。

4. 实际操作中的难点：

   • 证据收集：在对方逃逸的情况下，收集证据可能比较困难。您需要尽可能回忆事故发生的细节，并寻找可能的目击者或监控录像等证据。
   • 对方身份确认：如果对方留下的电话号码是虚假的或者无法联系到对方，那么确认对方身份并追究其责任将变得更加困难。

行动建议：

1. 立即报警：尽快向当地公安机关交通管理部门报案，并提供详细的事故信息和对方留下的联系方式。
2. 收集证据：尽可能收集与事故相关的证据，如照片、视频、证人证言等。
3. 咨询专业律师：在处理此类事故时，咨询专业律师的意见将非常有帮助。律师可以为您提供法律建议、协助您收集证据，并在必要时代表您进行诉讼。

后续思考：

• 在处理此类事故时，保持冷静和理性非常重要。不要因为情绪激动而采取过激行为，这可能会对您造成不必要的麻烦。
• 未来在驾驶过程中，建议安装行车记录仪等设备，以便在发生事故时能够提供更充分的证据。

如果您在处理此类事故过程中遇到任何法律问题或需要进一步的法律建议，请随时向我咨询。