结论：三年没有夫妻生活本身并不能直接作为要回钱的法律依据，但可能作为感情破裂的证据之一，在离婚诉讼中影响财产分割或损害赔偿的请求。具体能否要回钱，需结合实际情况和法律规定综合判断。
分析说明：
夫妻生活与财产分割的直接关系：
- 夫妻生活是婚姻关系中的一部分，但它本身并不直接决定财产的分割。在婚姻关系中，财产的分割主要依据的是夫妻双方的贡献、婚姻期间的共同财产状况、以及是否存在过错等因素。
- 三年没有夫妻生活，虽然可能表明夫妻关系出现了问题，但并不能直接作为分割财产或要求赔偿的法律依据。
作为感情破裂的证据：
- 然而，如果三年没有夫妻生活是由于一方的原因（如出轨、冷漠等），且这一行为导致了夫妻感情的彻底破裂，那么这一事实可能作为离婚诉讼中的证据，用于证明夫妻感情已经无法挽回。
- 在离婚诉讼中，如果一方能够证明另一方存在过错（如重婚、与他人同居、实施家庭暴力、虐待或遗弃家庭成员等），且这一过错与夫妻生活的缺失有直接关系，那么可能影响财产的分割比例，甚至可能要求过错方给予损害赔偿。但需要注意的是，单纯的夫妻生活缺失，并不直接等同于上述过错行为。
具体案例与法律规定：
- 在实际案例中，法院会综合考虑夫妻双方的实际情况、婚姻期间的贡献、财产状况、以及是否存在过错等因素，来做出公正的判决。
- 根据《中华人民共和国民法典》的相关规定，离婚时，夫妻的共同财产由双方协议处理；协议不成的，由人民法院根据财产的具体情况，按照照顾子女、女方和无过错方权益的原则判决。这意味着，在离婚诉讼中，无过错方可能会得到更多的财产分割比例。
行动建议：
- 收集证据：如果你认为三年没有夫妻生活是由于对方的原因，且这一行为导致了夫妻感情的破裂，那么你应该积极收集相关证据，如聊天记录、证人证言等，以证明对方存在过错。
- 咨询专业律师：在离婚诉讼中，财产分割和损害赔偿是一个复杂的问题，需要综合考虑多种因素。因此，我建议你咨询专业律师，根据你的具体情况给出更详细的法律建议。
- 考虑和解或调解：在离婚诉讼前，你也可以考虑与对方进行和解或调解，通过协商的方式解决财产分割和损害赔偿等问题，以减少诉讼成本和时间。
后续思考：
- 在处理类似问题时，除了考虑法律因素外，还需要考虑夫妻双方的感情状况、子女抚养问题、以及社会舆论等因素。
- 离婚诉讼是一个复杂而敏感的过程，需要谨慎处理。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。