结论：是否可以收取对方退还的钱款，需根据具体情况判断，主要涉及双方事先约定、款项性质及当地风俗习惯等因素。以下从不同角度进行分析：

1. 双方事先有明确约定

• 情况说明：若在请客前，双方已明确约定由谁买单，或您已明确表示愿意承担费用，而对方事后坚持退还，此时收取可能违背您的初衷或约定。
• 法律建议：若您希望坚持由自己买单，可与对方沟通，说明您的意愿，并拒绝收取退还的钱款。若对方坚持，可考虑以其他方式（如赠送小礼品）表达心意，避免直接金钱往来。

2. 双方事先无明确约定，且款项性质为“赠与”

• 情况说明：若请客时双方未明确约定由谁买单，且您买单的行为可视为对对方的一种赠与（即您自愿承担费用，无对价关系），则对方事后退还钱款，您收取与否需考虑双方关系及当地风俗习惯。
• 法律分析：
  • 从法律角度：赠与一旦完成，除非符合法定撤销条件（如严重侵害赠与人或其近亲属合法权益、对赠与人有扶养义务而不履行等），否则赠与人不得撤销赠与。但在此情况下，若对方坚持退还，且您收取，可能被视为双方对赠与关系的变更或解除，法律上并不禁止。
  • 从人情角度：若对方坚持退还，且您收取，可能影响双方关系。建议根据双方关系亲疏、当地风俗习惯及您的个人意愿决定是否收取。
• 法律建议：若您认为收取无碍双方关系，且符合当地风俗习惯，可收取；若您认为收取可能影响双方关系，或您希望坚持由自己买单，可拒绝收取，并说明您的意愿。

3. 双方事先无明确约定，且款项性质可能涉及“不当得利”

• 情况说明：若对方认为您买单的行为导致其“不当得利”（即对方无合法依据获得利益），而要求退还，此时需考虑您买单的行为是否确实导致对方获得不当利益。
• 法律分析：
  • 不当得利构成要件：一方获得利益，他方受有损失，获得利益与受有损失之间有因果关系，且获得利益无法律或合同依据。
  • 在此情况下的应用：若您买单的行为并未导致对方获得不当利益（如对方本就打算买单，或您买单是出于自愿且无对价关系），则对方要求退还可能不构成不当得利。但若对方确实因您买单而节省了费用，且您无合法依据要求对方承担费用，则对方要求退还可能有一定道理。
• 法律建议：若对方以“不当得利”为由要求退还，您可与对方沟通，说明您买单的初衷及无对价关系，若对方坚持，可考虑根据实际情况决定是否收取。若您认为收取可能涉及法律风险，或您希望避免纠纷，可拒绝收取。

4. 当地风俗习惯及双方关系的影响

• 情况说明：在处理此类问题时，还需考虑当地风俗习惯及双方关系。不同地区、不同文化背景下，人们对请客买单及退还钱款的看法可能不同。
• 法律建议：建议根据当地风俗习惯及双方关系亲疏，灵活处理。若当地风俗习惯认为请客后不应退还钱款，或双方关系亲密，无需过于计较金钱往来，可拒绝收取；若当地风俗习惯认为应退还，或双方关系一般，可考虑收取。

总结与建议：是否可以收取对方退还的钱款，需根据具体情况判断。建议根据双方事先约定、款项性质、当地风俗习惯及双方关系等因素综合考虑。若您有任何疑问或需要进一步的法律建议，可以直接向我咨询。