交通事故私了以后对方反悔，钱款是否需要退回需视具体情况而定。
一. 协议有效性及撤销条件
- 协议有效：如果双方在签订私了协议时都是基于自愿、公平、诚实信用的原则，并且协议内容没有违反法律法规的强制性规定，那么该协议就是有效的，双方应当遵守。在这种情况下，对方反悔并不意味着钱款就需要退回。
- 协议可撤销：如果当事人对达成的私了协议内容存在重大误解，例如受害者在不清楚自己受伤程度的情况下签订了赔偿协议，后来发现伤情严重，因此遭受了较大的损失，那么可以构成重大误解为由，请求人民法院或者仲裁机构予以撤销该协议。
二. 钱款处理
- 协议被撤销后的处理：如果协议被撤销是因为一方存在欺诈、胁迫等违法行为，那么已支付的钱款应当予以返还，并可能还需要支付额外的赔偿。如果协议被撤销是因为双方对事实或法律认识存在误解，且没有违法行为，那么已支付的钱款是否需要返还，则需要在法院或仲裁机构的判决或裁决中确定。
- 保留证据的重要性：为了避免后续纠纷和不必要的损失，当事人在签订私了协议时应当尽量明确、具体地约定协议内容，并保留好相关证据。如果可能的话，最好将协议内容以书面形式记录下来，并签字确认。
三. 我的观点
我认为，在交通事故私了后对方反悔的情况下，钱款是否需要退回并不能一概而论，而是需要根据协议的有效性、撤销条件以及具体情况来判断。因此，建议当事人在签订私了协议时要谨慎考虑，并尽量明确协议内容，保留好相关证据，以便在后续可能出现的纠纷中维护自己的合法权益。
如有进一步需要，您可以继续咨询我。