结论：针对您手机被别人充值了几千块并要求您退钱的情况，能否退钱需根据具体情形判断，包括充值行为的性质、您的主观意愿以及是否存在法律上的返还义务等。以下是对此问题的详细分析：
一、充值行为的性质
误充值：如果对方是误将款项充值到您的手机账户中，且您对此并不知情，那么从法律上讲，您并没有获得这笔款项的合法依据。根据《中华人民共和国民法典》的相关规定，因他人没有法律根据，取得不当利益，受损失的人有权请求其返还不当利益。因此，在这种情况下，您可能需要将这笔款项退还给对方。
恶意充值或诈骗：如果对方是故意将款项充值到您的手机账户中，并试图通过某种手段（如诈骗、敲诈勒索等）获取您的财物，那么这种行为可能构成违法犯罪。在这种情况下，您不仅不需要退还这笔款项，还可以向公安机关报案，追究对方的法律责任。
二、您的主观意愿
同意接收并使用：如果您在知道对方充值的情况下，同意接收并使用了这笔款项，那么从法律上讲，您可能构成对这笔款项的接受。然而，如果对方是基于错误的认识或欺诈手段使您接受了这笔款项，您仍然有权要求返还。
拒绝接收并要求退还：如果您在知道对方充值后，明确表示拒绝接收并要求退还这笔款项，那么您应当积极与对方沟通，协商退还事宜。如果对方拒绝退还，您可以考虑通过法律途径解决纠纷。
三、法律上的返还义务
不当得利返还：如前所述，如果对方是误充值，且您没有合法依据获得这笔款项，那么您可能构成不当得利。根据法律规定，您有义务将这笔款项返还给对方。
合同关系：如果双方之间存在某种合同关系（如购买服务、商品等），且对方充值是作为合同履行的一部分，那么您是否需要退还这笔款项将取决于合同的约定以及合同是否得到有效履行。如果合同无效或被撤销，或者对方未按照合同约定履行义务，您可能不需要退还全部或部分款项。
四、建议与措施
与对方沟通：首先，建议您与对方进行沟通，了解充值的具体原因和对方的意图。如果对方是误充值，您可以协商退还事宜；如果对方存在恶意或欺诈行为，您可以明确拒绝并告知对方将采取法律措施。
保留证据：在与对方沟通的过程中，建议您保留好相关证据（如聊天记录、转账记录等），以便在需要时证明自己的权益。
寻求法律帮助：如果双方无法协商解决纠纷，或者对方存在违法犯罪行为，建议您及时寻求法律帮助。您可以向公安机关报案，或者咨询专业律师以了解自己的权益和维权途径。
最后，针对您的情况，我建议您先与对方进行沟通，了解充值的具体原因和对方的意图。如果对方是误充值且您愿意退还，可以协商退还事宜；如果对方存在恶意或欺诈行为，或者双方无法协商解决纠纷，您可以考虑寻求法律帮助以维护自己的合法权益。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。