核心结论：对方无证驾驶且您已撤离现场的情况下，处理方式需分情况讨论，具体如下：

1. 若事故未造成人员伤亡，且双方对责任无争议
   您已撤离现场的行为本身不违法，但需注意保留证据（如行车记录仪视频、现场照片、对方无证驾驶的证据等）。建议通过书面协议（如微信、短信）与对方确认事故责任划分及赔偿方案，避免后续纠纷。若对方拒绝履行协议，可凭证据向法院起诉要求赔偿。

2. 若事故造成人员伤亡或财产损失较大
   即使您已撤离现场，仍需立即报警并返回现场配合调查。根据《道路交通安全法》第七十条，发生交通事故造成人员伤亡的，当事人应当立即抢救受伤人员并迅速报警。若未报警直接撤离，可能被认定为“逃逸”，即使对方无证驾驶，您也可能因逃逸承担部分责任。此时需主动向警方说明情况，提供对方无证驾驶的证据（如目击者证言、对方承认无证的录音等），以减轻自身责任。

3. 若对方存在酒驾、毒驾等严重违法行为
   无论事故轻重，均应立即报警并保护现场。对方无证驾驶本身已违法，若叠加酒驾、毒驾等情节，可能面临刑事处罚。您撤离现场后若未报警，可能影响警方对对方违法行为的认定，甚至导致您因未履行报警义务而承担连带责任。

关键提醒：

• 无证驾驶是严重违法行为，对方可能面临罚款、拘留甚至刑事责任（《道路交通安全法》第九十九条）。
  
• 您撤离现场的合法性取决于事故后果及是否履行报警义务。若因撤离导致证据灭失或责任无法认定，可能对您不利。
  
• 建议尽快联系交警部门说明情况，并咨询如何补充证据（如调取周边监控、寻找目击者等）。

后续建议：
若您对事故责任认定或赔偿问题有疑问，可直接向我咨询，我会结合具体证据（如现场照片、对方驾驶证信息等）为您分析法律风险及应对方案。