结论：不理卖家要求返还袜子钱的行为可能存在法律风险，建议根据实际情况采取合理措施，避免不必要的法律纠纷。以下从不同角度为你详细分析：

一、法律关系分析

1. 买卖合同关系：你与卖家之间存在买卖合同关系，你支付货款，卖家交付货物。在你申请退货退款时，若卖家同意退货，则双方实际上是在协商解除买卖合同。
2. 退货退款后的义务：根据《中华人民共和国民法典》的相关规定，合同解除后，尚未履行的，终止履行；已经履行的，根据履行情况和合同性质，当事人可以请求恢复原状或者采取其他补救措施，并有权请求赔偿损失。在你退货退款的情况下，若你确实未将全部货物退回，卖家有权要求你返还未退回货物的价款。

二、可能面临的法律后果

1. 卖家起诉要求返还：如果卖家能够证明你确实未退回两双袜子，且该袜子价值明确，卖家有权向法院起诉要求你返还袜子钱。法院在查明事实后，可能会判决你返还相应款项。
2. 信用影响：虽然此类纠纷通常不会直接影响你的个人信用记录，但如果卖家通过法律途径解决，且你未履行法院判决，可能会对你的信用产生间接影响，如被列入失信被执行人名单等。

三、建议处理方式

1. 核实情况：首先，核实自己是否确实未退回两双袜子。如果确实遗漏，建议主动与卖家沟通，说明情况并协商解决方案。
2. 协商解决：与卖家协商，看是否可以达成和解，如你支付袜子钱，卖家不再追究其他责任。这种方式既体现了你的诚信，也避免了不必要的法律纠纷。
3. 保留证据：如果与卖家沟通无果，或者卖家提出不合理要求，建议你保留好相关证据，如退货凭证、退款记录、与卖家的沟通记录等，以备不时之需。
4. 寻求法律帮助：如果卖家坚持要求你返还袜子钱，且你认为自己没有过错，或者卖家提出的金额不合理，你可以考虑寻求法律帮助，咨询专业律师的意见，了解自己的权利和义务，以及可能面临的法律后果。

四、特殊情况考虑

• 如果卖家存在过错：如果卖家在退货过程中存在过错，如未提供准确的退货地址、未及时确认收货等，导致你无法退回全部货物，你可以据此与卖家协商，要求卖家承担部分或全部责任。
• 如果袜子价值较低：如果两双袜子的价值较低，且你愿意承担这部分损失，也可以考虑直接支付给卖家，以避免不必要的麻烦和纠纷。

总之，面对卖家要求返还袜子钱的情况，建议你根据实际情况采取合理措施，既体现自己的诚信和责任感，也避免不必要的法律纠纷。如果有任何疑问或需要进一步的法律帮助，请随时向我咨询。