结论：在没有证据的情况下，想要将在外地买到的事故车退回去，确实存在较大的难度，但并非完全不可能。具体能否退货，需结合实际情况，从多个角度进行分析。

分析角度一：合同条款与卖家承诺

1. 审查购车合同：首先，您需要仔细审查购车合同中是否有关于车辆质量、事故历史、退换货条件等条款。如果合同中明确规定了卖家需保证车辆无事故，或提供了退换货的具体条件，而您购买的车辆确实存在事故历史，那么您有权依据合同条款要求退货。

2. 卖家口头承诺：如果卖家在购车过程中口头承诺了车辆无事故，但合同中未明确体现，您可以尝试收集相关证据（如聊天记录、录音等），以证明卖家的承诺。然而，口头承诺在法律上的证明力相对较弱，因此这一途径的成功率可能较低。

分析角度二：消费者权益保护

1. 消费者权益保护法：根据《中华人民共和国消费者权益保护法》的相关规定，消费者在购买商品时享有知情权、选择权等权益。如果卖家故意隐瞒车辆的事故历史，导致您在不知情的情况下购买了事故车，那么卖家的行为可能构成欺诈，您有权要求退货并索赔。

2. 举证责任：然而，在消费者权益保护的角度下，您需要承担举证责任，即证明卖家存在欺诈行为。这通常需要您提供车辆的事故记录、维修记录等证据。在没有这些证据的情况下，您的举证难度会大大增加。

分析角度三：实际可行措施

1. 尝试协商：尽管缺乏直接证据，但您可以尝试与卖家进行协商，说明您购买到事故车的情况，并表达退货的意愿。在协商过程中，您可以提及消费者权益保护法等相关法律法规，以增加协商的成功率。

2. 寻求第三方帮助：如果协商无果，您可以考虑寻求消费者协会、市场监管部门等第三方的帮助。这些机构可能能够协助您与卖家进行调解，或提供其他形式的帮助。

3. 法律途径：作为最后的手段，您可以考虑通过法律途径解决争议。然而，这通常需要您承担较高的诉讼成本和时间成本，且在没有直接证据的情况下，诉讼结果存在不确定性。

建议与提醒：

• 在未来购车时，务必要求卖家提供车辆的历史记录、维修记录等详细信息，并仔细审查购车合同中的条款。
• 如果可能的话，尽量在购车前对车辆进行全面的检查，或委托专业的第三方机构进行检测，以降低购买到事故车的风险。
• 如果您确实购买到了事故车且缺乏直接证据，不要轻易放弃维权。您可以尝试从多个角度收集间接证据，或寻求专业律师的帮助，以制定更有效的维权策略。

如有任何进一步的问题或需要更具体的法律建议，请直接向我咨询。