是否需要退赔，取决于具体情况，特别是你是否从中获益以及你是否知道或应当知道该笔款项的来源。下面我将分情况详细解释：

1. 如果你并不知情，且未从中获益：

   • 在这种情况下，你通常没有退赔的义务。因为你并没有故意参与任何不当行为，也没有从该笔款项中获得任何利益。法律上，对于不知情且无过错的第三方，一般不会要求其承担退赔责任。

2. 如果你并不知情，但从中获益：

   • 尽管你并不知情，但如果事实上你从中获得了利益（例如，该笔款项被用于你的个人消费或投资），那么在某些情况下，你可能需要承担一定的退赔责任。这是因为，即使你最初并不知情，但一旦你知晓并接受了该笔不当利益，就可能被视为不当得利，需要依法予以返还。

3. 如果你应当知情，但实际上并不知情：

   • 这种情况比较复杂。如果你因为疏忽大意或过于自信而没有发现该笔款项的异常，但按照常理或你的职业经验，你应当能够发现其问题，那么你可能需要承担一定的责任。具体责任大小，会根据你的过错程度、款项金额、是否造成实际损失等因素来综合判断。

4. 如果你知情并参与：

   • 显然，如果你明知该笔款项存在问题（例如，是非法所得或涉及合同诈骗），但仍然使用自己的银行卡接收并参与其中，那么你将需要承担全部的退赔责任，并可能面临法律制裁。

综上所述，是否需要退赔并不仅仅取决于你是否知情，还与你是否从中获益、是否应当知情等因素有关。因此，在面临类似情况时，建议你及时咨询专业律师（比如我），以便根据你的具体情况给出更准确的法律建议。同时，也提醒你注意保护自己的个人信息和银行账户安全，避免卷入不必要的法律纠纷。