结论：付款人把钱给了中间人后反悔，能否把钱要回来需视具体情况而定，主要取决于中间人的行为性质、付款人与中间人之间的法律关系以及相关证据的充分性。以下从不同角度进行分析：
一、中间人构成不当得利
法律背景：
- 根据《中华人民共和国民法典》的相关规定，不当得利是指没有法律根据，取得不当利益，造成他人损失的情形。若中间人没有合法依据占有付款人的资金，且付款人因此遭受损失，则中间人的行为可能构成不当得利。
法律建议：
- 付款人可以收集相关证据，如转账记录、聊天记录等，证明中间人没有合法依据占有其资金。
- 付款人可以向法院提起诉讼，要求中间人返还不当得利。
二、中间人构成无权代理或表见代理
法律背景：
- 若中间人以付款人的名义与第三方进行交易，但未经付款人授权或超越授权范围，则中间人的行为可能构成无权代理。
- 若第三方有理由相信中间人有代理权，且付款人对此有过错（如未及时撤销代理权公示），则可能构成表见代理，付款人需承担代理行为的法律后果。但在此情况下，若付款人能证明其并未授权中间人收款，且第三方明知或应知中间人无权收款，则付款人仍有可能向中间人追偿。
法律建议：
- 付款人应尽快收集证据，证明其并未授权中间人收款或中间人超越了授权范围。
- 若涉及无权代理，付款人可以向法院提起诉讼，要求中间人返还资金，并可能要求其承担因无权代理造成的损失。
- 若涉及表见代理，付款人需评估第三方是否善意且无过失，以及自身是否存在过错，再决定是否向中间人追偿。
三、中间人构成诈骗或侵占
法律背景：
- 若中间人以非法占有为目的，通过虚构事实或隐瞒真相的方法骗取付款人的资金，则可能构成诈骗罪。
- 若中间人将代为保管的他人财物非法占为己有，数额较大且拒不退还，则可能构成侵占罪。
法律建议：
- 付款人应立即向公安机关报案，提供相关证据，如转账记录、聊天记录、证人证言等，以证明中间人的犯罪行为。
- 付款人可以配合公安机关的调查工作，以便尽快追回损失。
- 在刑事诉讼过程中，付款人可以作为被害人参与诉讼，维护自己的合法权益。
四、其他注意事项
证据收集：
- 无论哪种情况，付款人都应尽可能收集相关证据，如转账记录、聊天记录、合同协议等，以证明其与中间人之间的法律关系以及中间人的行为性质。
法律程序：
- 付款人应根据具体情况选择合适的法律程序，如民事诉讼、刑事诉讼等，以维护自己的合法权益。
及时行动：
- 付款人应在发现中间人行为不当后尽快采取行动，以免因时间拖延导致证据灭失或法律后果加重。
进一步思考：在实际操作中，付款人还需考虑中间人的经济状况、偿债能力等因素，以评估追偿的可行性和效果。同时，付款人也可以咨询专业律师，以获取更具体的法律建议和指导。若您有具体的法律问题或需要进一步的法律帮助，请直接向我咨询。