是否需要退还礼物，需根据具体情况分析。下面我将分情况详细阐述：

一. 如果办事前双方有明确约定：

1. 若约定中明确提及礼物的处理方式：应按照约定执行。例如，如果约定中说明若事情未办成则礼物需退还，那么应当退还礼物。
2. 若约定中未明确提及礼物的处理方式：则需要根据诚信原则、社会习俗以及双方的关系来综合考虑。在这种情况下，通常建议双方进行友好协商，以达成一致意见。

二. 如果办事前双方没有明确约定：

1. 根据社会习俗和诚信原则：如果事情未办成，且并非由于收礼方的过错，那么收礼方可以考虑主动退还礼物，以体现诚信和尊重。
2. 考虑双方关系：如果双方关系亲密，且收礼方并未从礼物中获得实质性利益，那么退还礼物可能并非必要，以免伤害双方感情。但如果双方关系一般，或者收礼方因礼物而获得了某种利益（如提高了社会评价、增强了信任等），那么退还礼物可能更为合适。

我的观点：在处理这类问题时，应优先考虑双方的约定和社会习俗。如果没有明确约定，则应遵循诚信原则，尊重对方的意愿和感受。在大多数情况下，如果事情未办成，且并非由于收礼方的过错，那么主动退还礼物可能是一个更为稳妥和尊重的选择。当然，具体处理方式还需根据双方的具体情况和关系来灵活调整。如有进一步需要，您可以继续咨询我。