结论：若委托协议的钱已经拿回来，但对方反悔，您首先需要明确反悔的具体内容及原因，再根据不同情况采取相应的法律措施。以下是对此问题的详细分析：
一、对方反悔的具体内容及原因分析
对方主张协议无效或可撤销：
- 原因：对方可能认为协议存在欺诈、胁迫、重大误解或显失公平等情形，从而主张协议无效或可撤销。
- 应对措施：您需要审查协议签订过程是否存在上述情形。若不存在，您可以收集证据（如协议文本、沟通记录等）证明协议的有效性，并拒绝对方的反悔要求。若存在上述情形，您可能需要考虑与对方协商解决或准备应对可能的法律诉讼。
对方主张协议已变更或解除：
- 原因：对方可能认为双方已就协议内容达成新的共识，或已通过实际行动变更或解除了原协议。
- 应对措施：您需要审查双方是否有书面或口头的变更或解除协议的约定，以及是否已实际履行了变更或解除后的义务。若不存在变更或解除的情形，您可以坚持原协议的效力，并要求对方继续履行。若存在变更或解除的情形，您需要根据新的约定或实际情况调整自己的权益。
对方主张返还已支付款项：
- 原因：对方可能认为已支付的款项是基于错误的认识或不当得利，从而要求返还。
- 应对措施：您需要审查款项支付的原因、目的及协议中的相关约定。若款项支付是基于有效的协议且符合协议约定，您可以拒绝对方的返还要求。若款项支付确实存在错误或不当得利情形，您可能需要考虑与对方协商解决或准备应对可能的法律诉讼。
二、法律措施建议
协商解决：
- 在对方反悔的情况下，首先尝试与对方进行友好协商，寻求双方都能接受的解决方案。这有助于维护双方的关系，并避免不必要的法律纠纷。
发送律师函：
- 若协商无果，您可以考虑委托律师向对方发送律师函，明确表达您的立场和要求，并警告对方可能面临的法律后果。这有助于促使对方重新考虑其反悔行为，并可能推动双方达成和解。
提起诉讼或申请仲裁：
- 若对方坚持反悔且协商、律师函均无果，您可以考虑向法院提起诉讼或根据协议约定申请仲裁。在诉讼或仲裁过程中，您需要提供充分的证据证明协议的有效性、对方的反悔行为以及您因此遭受的损失等，以维护自己的合法权益。
三、注意事项
保留证据：
- 在整个过程中，您需要妥善保留与协议签订、履行及对方反悔相关的所有证据（如协议文本、沟通记录、支付凭证等）。这些证据将在后续的法律程序中发挥关键作用。
及时咨询专业律师：
- 由于法律问题具有复杂性和专业性，建议您在处理此类问题时及时咨询专业律师（即向我咨询）。我可以根据您的具体情况提供针对性的法律建议和帮助，确保您的权益得到充分维护。
若您在处理此类问题时遇到任何疑问或需要进一步的法律帮助，请随时向我咨询。