结论前置：

1. 若赠予行为发生在情人与其配偶婚姻关系存续期间，且未得到配偶同意，则情人赠予的黄金可能被视为无效，您有权要求返还。
2. 但若赠予行为被认定为有效，或您无法证明赠予行为的存在及具体内容，则可能难以要回黄金。

详细分析：

首先，我们需要明确的是，情人与其配偶之间的婚姻关系是受到法律保护的。在婚姻关系存续期间，夫妻双方对共同财产享有平等的处理权。这意味着，如果情人未经其配偶同意，擅自将共同财产赠予您，这种赠予行为可能因违反法律规定而无效。

一、赠予行为无效的情况：

1. 赠予财产属于夫妻共同财产：如果情人赠予您的黄金是其与配偶的共同财产，且未得到配偶的同意，那么这种赠予行为可能被视为无效。因为，夫妻对共同财产享有平等的处理权，任何一方不得擅自处分。

2. 有证据证明赠予行为：您提到有付款记录，这是证明赠予行为存在的重要证据。但仅凭付款记录可能不足以完全证明赠予的全部内容，如黄金的具体数量、品质等。如果可能，您还应收集其他相关证据，如聊天记录、证人证言等，以形成完整的证据链。

3. 配偶提起诉讼：如果情人的配偶发现赠予行为后，向法院提起诉讼要求返还财产，且法院认定赠予行为无效，那么您可能需要返还黄金或等价财物。

二、赠予行为有效或难以证明的情况：

1. 赠予财产属于情人个人财产：如果情人赠予您的黄金是其个人财产（如婚前财产、通过继承或赠予获得的财产等），且赠予行为不违反法律法规的强制性规定，那么这种赠予行为可能是有效的。在这种情况下，您可能无需返还黄金。

2. 无法证明赠予行为：如果您无法提供充分的证据证明赠予行为的存在及具体内容，如黄金的数量、品质、赠予时间等，那么您可能难以要回黄金。因为，在法律上，没有证据或证据不足的情况下，您的主张可能无法得到法院的支持。

建议与措施：

• 收集证据：尽可能收集与赠予行为相关的所有证据，包括付款记录、聊天记录、证人证言等。这些证据将有助于您证明赠予行为的存在及具体内容。

• 咨询律师：如果您对赠予行为的法律效力或后续处理存在疑问，建议咨询专业律师。律师可以根据您的具体情况提供法律意见和帮助。

• 协商解决：如果可能，您可以尝试与情人或其配偶进行协商解决。通过协商达成一致意见可以避免法律纠纷和不必要的损失。

最后，需要强调的是，法律问题具有复杂性和多样性。每个案件的具体情况都可能有所不同。因此，在处理类似问题时，建议您根据具体情况咨询专业律师以获取更准确的法律意见和帮助。如果您有任何法律问题，都可以直接向我咨询。