结论：能否告对方违约，取决于对方退回预付款的具体原因和合同中的相关约定。以下从不同角度进行分析：

1. 合同有明确约定：

   • 如果合同中明确规定了预付款的支付、使用及退回条件，且对方退回预付款的行为违反了这些约定，那么你可以依据合同条款，主张对方构成违约，并有权要求其承担违约责任，如继续履行合同、赔偿损失等。
   • 举例：合同中约定“预付款用于项目启动，非经双方协商一致，不得退回”。若对方无正当理由退回预付款，则构成违约。

2. 合同无明确约定或约定不明：

   • 如果合同中没有明确规定预付款的退回条件，或者规定不明确，那么就需要根据《民法典》等相关法律法规，结合交易习惯、合同目的等因素，来判断对方退回预付款的行为是否构成违约。
   • 在这种情况下，如果对方退回预付款有合理理由（如项目无法继续、合同解除等），且该理由符合法律法规或交易习惯，那么可能不构成违约。但如果对方无正当理由退回预付款，且给你造成了损失，你可以主张对方承担缔约过失责任或侵权责任。
   • 举例：若因不可抗力导致项目无法继续，对方退回预付款可能不构成违约；但若对方无故退回，且你已为项目做了前期准备并产生了费用，你可以要求对方赔偿这些损失。

3. 对方退回预付款的合法抗辩：

   • 对方可能提出一些合法抗辩，如合同存在无效或可撤销的情形、你方存在违约行为等，来主张其退回预付款的行为是合法的。
   • 在这种情况下，你需要仔细审查合同及双方的行为，判断对方的抗辩是否成立。如果对方的抗辩不成立，你仍然可以主张对方构成违约。

法律建议：

• 首先，仔细审查合同条款，特别是关于预付款的支付、使用及退回的约定。
• 其次，与对方沟通，了解其退回预付款的具体原因和依据。
• 如果认为对方构成违约，且无法通过协商解决，可以考虑通过法律途径维护自己的权益，如起诉或申请仲裁。

可能法律后果：

• 如果法院或仲裁机构认定对方构成违约，对方可能需要承担继续履行合同、赔偿损失等违约责任。
• 如果法院或仲裁机构认定对方不构成违约，或者你的诉求得不到支持，那么你可能需要承担诉讼或仲裁费用，并可能面临无法追回预付款或赔偿的风险。

如有更多细节或疑问，可以直接向我咨询，我会结合具体情况为你提供更详细的法律建议。