结论前置：服装店操作失误把钱退回来了，一般情况下您应当归还，否则可能构成不当得利，需要承担相应的法律责任。不过，也存在一些特殊情况可能影响归还义务，下面为您详细分析。

一般情况：应当归还，否则构成不当得利

根据《中华人民共和国民法典》的相关规定，不当得利是指得利人没有法律根据取得不当利益的，受损失的人可以请求得利人返还取得的利益。在服装店操作失误把钱退回给您的场景中，服装店是因自身失误而多支付了款项，您取得这笔款项并没有法律上的依据，因此构成不当得利。

• 法律后果：如果服装店发现操作失误并要求您归还退款，您有义务返还。若您拒绝归还，服装店有权通过法律途径追讨，比如向法院提起诉讼。一旦法院认定您构成不当得利，您不仅需要归还退款，还可能需要支付因诉讼产生的相关费用，如诉讼费等。

特殊情况：可能影响归还义务的因素

虽然一般情况下您应当归还退款，但也存在一些特殊情况可能影响您的归还义务。

1. 服装店明确表示放弃追讨

   • 如果服装店在发现操作失误后，明确表示放弃追讨这笔退款，并且有相应的书面或录音等证据证明，那么您可能无需再归还。不过，这种情况比较少见，因为服装店通常不会轻易放弃自己的财产权益。

2. 退款金额极小且服装店未积极追讨

   • 如果退款金额非常小，比如几元钱，且服装店在发现操作失误后并未积极追讨，而是采取了放任的态度，那么从实际执行的角度来看，您可能无需主动归还。但这种情况并不意味着您在法律上没有归还义务，只是服装店可能出于成本考虑而选择不追讨。

3. 存在其他法律关系或约定

   • 如果您与服装店之间存在其他法律关系或约定，比如您是服装店的会员，且会员协议中有关于退款处理的特殊条款，那么这些条款可能影响您的归还义务。不过，这种情况需要具体分析会员协议的内容以及相关法律法规的规定。

法律建议：为了避免不必要的法律纠纷和损失，建议您在发现服装店操作失误退回款项后，及时与服装店联系并说明情况。如果服装店要求归还，您应当积极配合并归还退款。如果您对归还义务存在疑问或争议，可以咨询专业律师（即向我咨询）以获取更具体的法律建议。