核心结论：您将黄金卖给回收店后，对方要求您退钱，是否需要退钱取决于双方交易的具体情况及是否存在合法有效的解除事由。以下分情况说明：

1. 若交易合法有效且无解除事由
   若您与回收店之间的黄金买卖交易已依法成立（例如双方对黄金品质、价格达成一致，您已交付黄金且对方已支付款项），且不存在法定或约定的解除条件（如欺诈、胁迫、重大误解等），则对方无权单方面要求您退钱。
   建议：

   • 拒绝对方的无理要求，并明确告知其交易已合法完成；
     
   • 保留交易凭证（如收据、转账记录、聊天记录等）以备后续维权；
     
   • 若对方持续骚扰或采取不当手段，可向市场监管部门投诉或通过法律途径解决。

2. 若交易存在法定或约定解除事由
   若交易过程中存在以下情形，对方可能有权要求解除合同并退款：

   • 欺诈或隐瞒：如您故意隐瞒黄金的真实来源（如赃物）、品质（如假金）或重量；
     
   • 重大误解：如双方对黄金的纯度、重量等关键信息存在重大误解，且该误解直接影响交易价格；
     
   • 显失公平：如回收价格远低于市场合理水平，且您在交易时处于明显弱势地位；
     
   • 合同约定：若双方在交易前明确约定了退款条件（如“7天内无理由退款”），且您同意该条款。
     建议：
     
   • 核实对方要求退款的具体理由及证据；
     
   • 若对方理由成立，可协商退款或部分补偿；
     
   • 若对方理由不成立，可拒绝并要求其继续履行合同。

3. 若对方涉嫌违法或侵权
   若对方以威胁、骚扰、非法拘禁等手段强迫您退款，或未经您同意私自扣留、损毁您的黄金，则可能涉嫌违法。
   建议：

   • 立即报警并保留相关证据（如录音、录像、证人证言）；
     
   • 要求对方赔偿因侵权行为造成的损失；
     
   • 通过法律途径追究对方的民事或刑事责任。

行动建议：

• 首先与对方沟通，了解其要求退款的具体原因及依据；
  
• 核对交易过程中的所有凭证及沟通记录，确认自身是否存在过错；
  
• 若无法协商解决，可向当地消费者协会、市场监管部门或法院寻求帮助。
  

如有进一步疑问或需要具体指导，可直接向我咨询。