结论：是否需要退回钱款，取决于转账及U币交易的性质、双方约定以及相关法律法规的适用情况。以下从不同角度进行分析。
一、交易性质与双方约定
合法交易：
- 如果双方之间的转账和U币交易是合法且基于双方自愿、平等的原则进行的，且没有违反任何法律法规或公序良俗，那么通常情况下，一旦交易完成，即一方支付了款项，另一方交付了U币，双方均应履行各自的义务，无需退回钱款。
- 关键点：需确认交易是否合法，以及双方是否有明确的约定（如书面合同、口头协议等）来规范交易行为。
非法或违规交易：
- 如果交易涉及非法活动（如洗钱、诈骗等）或违反了相关法律法规（如外汇管理规定、虚拟货币交易限制等），则交易可能被视为无效，此时，根据法律规定，可能需要退回钱款或承担其他法律责任。
- 关键点：需评估交易是否违反了法律法规，以及违反的具体条款和后果。
二、法律法规的适用
虚拟货币交易规定：
- 在我国，虚拟货币（如U币）的交易受到严格限制。如果交易违反了相关虚拟货币交易的规定，如未经批准的虚拟货币交易平台进行的交易，可能面临法律风险。
- 法律后果：根据相关规定，违反虚拟货币交易规定的，可能面临罚款、没收违法所得等行政处罚，甚至可能涉及刑事责任。在此情况下，退回钱款可能是减轻法律责任的一种方式。
合同法规：
- 如果双方之间的交易构成了合同关系，那么合同法的规定将适用。根据合同法，如果合同无效或被撤销，那么因合同取得的财产应当返还。
- 关键点：需判断交易是否构成了合同关系，以及合同是否无效或被撤销。
三、实际操作建议
收集证据：
- 无论交易是否合法，都建议收集并保存与交易相关的所有证据，如转账记录、聊天记录、合同等，以备不时之需。
咨询专业意见：
- 如果对交易的性质、法律法规的适用或法律责任有疑问，建议咨询专业律师或相关机构的意见，以获取更准确和全面的法律指导。
协商解决：
- 如果双方对交易结果有争议，可以尝试通过协商解决。在协商过程中，可以明确各自的权利和义务，寻求双方都能接受的解决方案。
总结与建议：是否需要退回钱款取决于交易的性质、双方约定以及相关法律法规的适用情况。如果交易合法且双方无争议，则无需退回；如果交易非法或违规，或双方存在争议，则可能需要退回钱款或承担其他法律责任。建议收集证据、咨询专业意见，并尝试通过协商解决争议。如有任何法律问题，可以直接向我咨询。