结论：是否需要返还这笔钱，关键在于这笔钱的性质以及是否属于夫妻共同财产被无权处分的情况。以下分情况具体说明：
如果这笔钱属于夫妻共同财产，且你明知或应知对方已婚仍接受款项：
- 在婚姻关系存续期间，夫妻双方对共同财产享有平等的处理权。如果一方未经另一方同意，擅自将夫妻共同财产赠与他人，这种赠与行为通常会被认定为无效，因为这侵犯了另一方的财产权益。
- 在这种情况下，如果对方妻子能够证明这笔钱是夫妻共同财产，并且你明知或应知对方已婚仍接受这笔钱，那么她有权要求你返还这笔钱。
如果这笔钱不属于夫妻共同财产，或者你并不知道对方已婚：
- 如果这笔钱是对方的个人财产，比如他通过个人劳动或继承等方式获得的财产，那么他有权自由处分这笔钱，包括给你作为装货下货的报酬。
- 另外，如果你并不知道对方已婚，且没有其他过错行为（如明知对方有配偶仍与其保持不正当关系等），那么对方妻子通常无权要求你返还这笔钱。因为你在接受款项时是善意的，且没有侵犯任何人的合法权益。
法律背景与建议：
- 根据《中华人民共和国民法典》的相关规定，夫妻在婚姻关系存续期间所得的财产，归夫妻共同所有，双方有平等的处理权。任何一方不得擅自处分夫妻共同财产，否则可能构成无权处分，导致处分行为无效。
- 如果你面临这种情况，建议首先与对方及其妻子进行沟通，了解这笔钱的来源和性质，以及他们之间的财产约定（如果有的话）。如果沟通无果，或者对方妻子坚持要求你返还这笔钱，你可以考虑咨询专业律师，了解自己的权利和义务，以及可能的法律后果。
- 在处理这类问题时，务必保留好相关证据，如转账记录、聊天记录等，以便在需要时证明自己的清白和权益。
可能的法律后果：
- 如果法院最终认定这笔钱属于夫妻共同财产，且你明知或应知对方已婚仍接受款项，那么法院可能会判决你返还这笔钱给对方妻子。
- 如果法院认定这笔钱不属于夫妻共同财产，或者你并不知道对方已婚，那么法院可能会驳回对方妻子的诉讼请求，你无需返还这笔钱。
总之，这个问题涉及到夫妻共同财产的处理权以及善意取得等法律问题。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。