结论：是否需要退钱取决于签署的“不再主张任何权利”协议的具体内容、签署背景以及后续起诉的具体诉求。以下从不同角度进行分析：
一、协议内容与法律效力
协议内容明确且合法：
- 如果签署的“不再主张任何权利”协议内容明确，涵盖了您可能主张的所有权利，并且该协议是在双方平等、自愿、协商一致的基础上签订的，没有违反法律、行政法规的强制性规定，也没有违背公序良俗，那么该协议通常具有法律效力。
- 在这种情况下，如果您后续又起诉单位，且起诉的诉求与协议中放弃的权利相关，单位可能会以该协议作为抗辩理由，要求法院驳回您的诉求。如果您败诉，且单位要求您退还因协议而获得的利益（如补偿款等），您可能需要退还。
协议内容不明确或存在瑕疵：
- 如果协议内容不明确，或者存在欺诈、胁迫、乘人之危等情形，导致协议并非您的真实意思表示，那么该协议可能无效或可撤销。
- 在这种情况下，您后续起诉单位，法院可能会根据实际情况判决，如果您胜诉，且单位之前未支付或未完全支付您应得的权益，您无需退还任何钱款；如果单位已经支付了部分或全部钱款，但根据法院判决您应获得更多，单位可能还需要补足差额。
二、起诉的具体诉求
与协议无关的诉求：
- 如果您后续起诉单位的诉求与之前签署的“不再主张任何权利”协议无关，比如是基于新的事实或法律关系提出的诉求，那么该协议通常不会影响您的起诉。
- 在这种情况下，您无需因为起诉而退还任何钱款。
与协议相关的诉求但存在新情况：
- 如果您后续起诉的诉求与协议相关，但出现了新情况或新证据，导致您之前放弃的权利现在又有了主张的必要性和合理性，那么法院可能会根据实际情况进行判决。
- 在这种情况下，是否需要退还钱款取决于法院的判决结果。如果法院支持您的诉求，您无需退还；如果法院不支持，且单位要求退还，您可能需要退还。
三、实际操作建议
审查协议内容：
- 仔细审查之前签署的“不再主张任何权利”协议，明确协议的具体内容、签署背景以及可能涉及的法律后果。
咨询专业意见：
- 在决定是否起诉单位之前，建议咨询专业律师的意见，了解起诉的可行性和可能面临的风险。
准备证据材料：
- 如果决定起诉，需要准备充分的证据材料来支持自己的诉求，包括与协议相关的证据、与起诉诉求相关的证据等。
后续思考依据：在处理此类问题时，关键在于明确协议的法律效力、起诉的具体诉求以及它们之间的关系。因此，在做出任何决定之前，务必进行充分的法律分析和风险评估。如果您有任何疑问或需要进一步的法律帮助，请直接向我咨询。