结论：是否需要还钱，取决于借款的性质以及是否有相关证据支持。以下从不同情况为你详细分析：
一、借款性质为普通借贷
有书面借款合同或借条：
- 如果你们在恋爱期间有明确的书面借款合同或借条，且合同中明确约定了还款期限、利息等条款，那么这笔借款在法律上是被认可的。即使分手后三四年，男方仍然有权要求你按照合同约定还款。
- 法律建议：在这种情况下，如果你确实收到了借款，且没有按照约定还款，那么男方起诉你要求还款是合法的。你应当考虑与男方协商还款事宜，或者准备相关证据以应对可能的法律诉讼。
无书面借款合同或借条，但有转账记录等证据：
- 如果没有书面借款合同或借条，但男方能够提供转账记录、聊天记录等证据证明借款事实的存在，那么法院在审理时可能会认定这笔借款为真实存在。
- 法律建议：在这种情况下，你需要仔细审查男方提供的证据，并考虑自己是否有相反的证据来反驳。如果男方提供的证据充分，且你无法提供反驳证据，那么法院可能会判决你还款。
无任何书面或转账证据：
- 如果既没有书面借款合同或借条，也没有转账记录等证据证明借款事实的存在，那么男方起诉你要求还款可能会面临举证困难的问题。
- 法律建议：在这种情况下，你可以积极抗辩，主张双方之间不存在借款关系。如果男方无法提供充分证据证明借款事实，那么法院可能会驳回其诉讼请求。
二、借款性质为赠与或恋爱期间共同消费
赠与性质：
- 如果男方在恋爱期间给予你的钱款被认定为赠与性质（如节日红包、礼物等），那么这些钱款在法律上是不需要返还的。
- 法律建议：在这种情况下，你可以主张这些钱款是男方对你的赠与，无需返还。但需要注意的是，如果赠与的钱款数额较大，且男方能够证明这是以结婚为目的的赠与（如彩礼），那么在某些情况下可能需要返还。
恋爱期间共同消费：
- 如果男方给予你的钱款是用于恋爱期间的共同消费（如一起旅游、吃饭等），那么这些钱款在法律上也是不需要返还的。
- 法律建议：在这种情况下，你可以主张这些钱款是用于双方共同消费，并非借款或赠与，因此无需返还。
三、诉讼时效问题
- 根据《中华人民共和国民法典》的规定，向人民法院请求保护民事权利的诉讼时效期间为三年。但是，自权利受到损害之日起超过二十年的，人民法院不予保护。
- 法律分析：如果男方在分手后三四年才起诉你要求还款，且没有证据证明存在诉讼时效中断或中止的情形，那么他的诉讼请求可能会因为超过诉讼时效而被法院驳回。但需要注意的是，如果男方能够证明在诉讼时效期间内曾向你主张过权利（如发送催款短信、电话等），那么诉讼时效可能会重新计算。
后续行动建议：
- 收集证据：仔细审查男方提供的证据，并收集自己手中的相关证据（如聊天记录、转账记录等）以支持自己的主张。
- 咨询专业意见：如果你对法律问题存在疑问或不确定如何应对男方的起诉，建议及时向我咨询，以便更好地维护自己的合法权益。
- 积极应对诉讼：如果男方已经起诉你要求还款，你需要积极应对诉讼，按照法院的要求提交证据、参加庭审等。
希望以上分析能够对你有所帮助。如果你有任何其他问题或需要进一步的法律建议，请随时向我咨询。