没有直接委托人收了定金，是否能退给对方，需视具体情况而定。以下是从不同角度进行的分析：
一、定金合同的效力与直接委托人的关系
定金合同的有效性：
- 定金合同是实践合同，自定金实际交付时成立。若您作为非直接委托人收取了定金，但定金合同本身合法有效（即双方意思表示真实，不违反法律、行政法规的强制性规定），则定金合同对双方具有约束力。
直接委托人的角色：
- 直接委托人通常指与定金支付方直接签订合同或达成协议的一方。若您并非直接委托人，但实际收取了定金，这可能涉及无权代理或表见代理的问题。
- 无权代理：若您未经直接委托人授权而收取定金，且支付方知道或应当知道您无权代理，则定金合同可能对直接委托人不产生效力，您可能需要自行承担返还定金的责任。
- 表见代理：若您虽无直接委托人的明确授权，但支付方有理由相信您有权代理（如您持有直接委托人的相关文件或印章），则可能构成表见代理，定金合同对直接委托人产生效力，您需协助直接委托人处理定金返还事宜。
二、定金返还的法律依据与情形
合同解除或无效：
- 若定金合同因某种原因（如双方协商一致、合同目的无法实现等）被解除或认定为无效，则定金应返还给支付方。
违约责任：
- 若因您或直接委托人的原因导致合同无法履行，且构成违约，则根据定金罚则，违约方可能需双倍返还定金或承担其他违约责任。但在此情况下，若您并非直接违约方，而是作为中间人收取了定金，您可能需根据与直接委托人的约定或法律规定来确定是否承担返还责任。
不当得利：
- 若您收取定金后无法证明其合法来源或无法将定金转交给直接委托人，且支付方要求返还，则您可能构成不当得利，需返还定金。
三、实际操作建议
核实身份与授权：
- 在收取定金前，务必核实自己的身份和授权范围，确保有权代表直接委托人收取定金。
签订书面协议：
- 与支付方签订书面定金合同或协议，明确双方的权利义务、定金数额、返还条件等，以避免纠纷。
及时沟通与转交：
- 收取定金后，应及时与直接委托人沟通，并将定金转交给其或按照其指示处理。
咨询专业律师：
- 若遇到定金返还纠纷或不确定如何处理，建议及时咨询专业律师，以维护自身合法权益。
针对您的情况，若您并非直接委托人但收取了定金，且现在面临定金返还的问题，我建议您首先核实自己收取定金的合法性和授权范围，然后与支付方和直接委托人进行沟通协商，寻求妥善解决方案。若无法协商一致，可考虑通过法律途径解决纠纷。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。