结论概述：在货物买卖合同纠纷中，若没有书面合同且对方未实际支付货款，您是否需要给对方钱，这主要取决于双方之间的实际交易情况、证据以及相关法律规定。以下是从不同角度进行的分析：

1. 合同成立与履行情况：

   • 口头合同效力：根据《中华人民共和国民法典》的相关规定，口头合同也是合同的一种形式，只要双方意思表示真实且不违反法律、行政法规的强制性规定，口头合同同样具有法律效力。因此，即使没有书面合同，如果双方已经通过口头或其他方式达成了买卖合意，并且您已经接收了货物（尽管对方未付款），那么合同在事实上已经成立并部分履行。
   • 合同履行抗辩权：在对方未支付货款的情况下，您作为卖方有权行使同时履行抗辩权或先履行抗辩权（如果合同中有约定履行顺序），即拒绝交付货物或要求对方先支付货款。但在此情况下，若您已经接收了货物并同意退货，则可能视为您放弃了部分抗辩权，需要进一步考虑退货后的责任承担。

2. 退货后的责任承担：

   • 退货协议：如果双方已经就退货事宜达成了协议，那么应按照协议内容执行。如果协议中明确规定了退货后双方的责任和义务，包括是否需要退款、退款金额及方式等，则应按照协议履行。
   • 无退货协议时的处理：在没有退货协议的情况下，退货后是否需要退款取决于退货的原因和双方的责任。如果退货是因为货物存在质量问题或不符合合同约定，那么您作为卖方通常需要承担退款责任。但如果退货是因为对方的原因（如改变主意、无法支付货款等），且您没有过错，则您可能不需要承担退款责任。然而，这需要根据具体证据和法律规定来判断。

3. 证据收集与法律适用：

   • 证据收集：在处理此类纠纷时，证据的收集至关重要。您应尽可能收集与交易相关的所有证据，包括但不限于口头协议的记录（如录音、聊天记录等）、货物交付和接收的证据、对方未支付货款的证据等。这些证据将有助于您证明自己的主张并维护自己的权益。
   • 法律适用：在解决纠纷时，应适用《中华人民共和国民法典》中关于合同成立、履行、抗辩权以及违约责任等相关规定。同时，也可以参考相关司法解释和案例来指导实践。

4. 建议与行动：

   • 协商解决：首先，我建议您与对方进行协商，尝试达成一个双方都能接受的解决方案。这可以节省时间和成本，并维护双方的商业关系。
   • 法律途径：如果协商无果，您可以考虑通过法律途径解决纠纷。这包括向法院提起诉讼或申请仲裁等。在采取法律行动前，请确保您已经收集了足够的证据来支持您的主张。

总结与提醒：在处理没有书面合同且对方未实际支付货款的货物买卖合同纠纷时，您应首先考虑双方之间的实际交易情况和证据收集。退货后是否需要退款取决于退货的原因和双方的责任。我建议您在处理此类纠纷时保持冷静和理性，尽可能通过协商解决问题。如果协商无果，可以寻求法律帮助来维护自己的权益。如有任何疑问或需要进一步的法律建议，请随时向我咨询。