结论：在货物买卖合同纠纷中，如果卖方多给了钱（或货物，原理相同），买方不可以不主动退还，否则可能构成不当得利，甚至可能面临法律责任。
详细分析：
不当得利的法律定义与规定：
- 不当得利是指没有合法依据，或事后丧失了合法根据，因致他人遭受损失而获得的利益。在货物买卖合同中，如果卖方多给了钱或货物，而买方没有合法依据获得这部分额外的利益，即构成不当得利。
- 根据《中华人民共和国民法典》第九百八十五条，得利人没有法律根据取得不当利益的，受损失的人可以请求得利人返还取得的利益。这意味着，卖方有权要求买方返还多给的钱或货物。
买方的义务与责任：
- 退还义务：买方在发现卖方多给了钱或货物时，应及时与卖方沟通，并协商处理方式。如果卖方要求退回，买方应当积极配合，及时退回多给的部分。这是买方对卖方财产权的尊重，也是遵守法律法规的体现。
- 法律责任：如果买方拒不退还多给的钱或货物，这可能构成侵占罪（在货物价值达到一定数额且买方明知多给却故意拒不归还的情况下）。侵占罪是指将代为保管的他人财物非法占为己有，数额较大，拒不退还的行为。尽管这种情况可能不完全等同于典型的侵占行为，但若符合侵占罪的构成要件，买方也可能面临刑事责任。
卖方的权利与行动：
- 请求返还：卖方有权要求买方返还多给的钱或货物，这是基于不当得利的法律规定。
- 合法维权：如果买方拒绝退还，卖方可以通过合法途径维护自身权益，如与买方协商沟通、向消费者协会投诉（如果买方是消费者）或者直接向法院提起诉讼。
实际操作建议：
- 友好协商：在发现多给钱或货物的情况时，双方应首先通过友好协商解决问题。买方可以主动退还多给的部分，以避免不必要的法律纠纷和道德责任。
- 保留证据：双方应保留好相关证据，如交易记录、沟通记录等，以便在需要时证明自己的权益和主张。
特殊情况说明：
- 如果买方在不知情的情况下收到了多给的钱或货物，并在发现后及时与卖方沟通并退还，那么买方通常不会承担法律责任。
- 如果卖方在交易过程中存在过错或疏忽导致多给钱或货物，这并不影响买方退还的义务。卖方的过错或疏忽不能成为买方非法占有多给部分的合法依据。
总结与建议：
在货物买卖合同纠纷中，如果卖方多给了钱或货物，买方应当主动退还以避免构成不当得利和可能面临的法律责任。双方应友好协商解决问题，并保留好相关证据以备不时之需。如果买方拒不退还或双方无法协商解决，卖方可以通过合法途径维护自身权益。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。