结论：男方五年以后一般不可以直接起诉女方出轨要求赔偿或追究责任，但若因女方出轨导致离婚，男方可在离婚时或离婚后一年内主张损害赔偿。
分析说明：
出轨行为与诉讼时效：
- 出轨行为本身，并不直接构成法律上的可诉讼事项，除非它导致了具体的损害后果，如离婚、财产分割争议或精神损害赔偿等。
- 单纯的出轨行为，没有造成其他法律后果的，并不受诉讼时效的限制，但也没有直接的法律救济途径。若因出轨导致离婚，并涉及损害赔偿的，则适用《民法典》中关于诉讼时效的规定。一般来说，向人民法院请求保护民事权利的诉讼时效期间为三年，但离婚损害赔偿请求权的诉讼时效期间，从当事人知道或应当知道权利被损害之日起计算，且在离婚后一年内提出。
离婚时的损害赔偿：
- 如果女方出轨是导致离婚的原因，男方可以在离婚时依据《民法典》的相关规定，向女方主张损害赔偿。
- 损害赔偿包括物质损害赔偿和精神损害赔偿。物质损害赔偿主要针对因出轨行为导致的直接经济损失，如因处理出轨事件而产生的费用等；精神损害赔偿则是对男方因女方出轨而遭受的精神痛苦和创伤的补偿。
离婚后的损害赔偿主张：
- 如果男方在离婚时未提出损害赔偿请求，但在离婚后发现女方在婚姻关系存续期间存在出轨行为，且该行为对男方造成了损害，男方仍可以在离婚后一年内向人民法院提起诉讼，要求女方承担损害赔偿责任。
- 但需要注意的是，这一权利的行使受到诉讼时效的限制，即必须在离婚后一年内提出。
特殊场景：
- 如果女方出轨行为涉及重婚或与他人同居等严重情形，且这些情形在离婚后很长时间才被发现，男方仍有可能在发现后的一年内主张损害赔偿，但需要提供充分的证据证明女方的出轨行为以及该行为对男方造成的损害。
行动建议：
- 如果男方因女方出轨而遭受了损害，并希望获得法律救济，建议男方在发现出轨行为后及时收集证据，并在离婚时或离婚后一年内向人民法院提起诉讼，要求女方承担损害赔偿责任。
- 在处理此类纠纷时，建议男方咨询专业律师，以便更好地了解自己的权利和义务，以及如何有效地维护自己的合法权益。
法律背景：
- 《民法典》第一千零九十一条：有下列情形之一，导致离婚的，无过错方有权请求损害赔偿：（一）重婚；（二）与他人同居；（三）实施家庭暴力；（四）虐待、遗弃家庭成员；（五）有其他重大过错。
- 《最高人民法院关于适用〈中华人民共和国民法典〉婚姻家庭编的解释（一）》第八十七条：承担民法典第一千零九十一条规定的损害赔偿责任的主体，为离婚诉讼当事人中无过错方的配偶。人民法院判决不准离婚的案件，对于当事人基于民法典第一千零九十一条提出的损害赔偿请求，不予支持。在婚姻关系存续期间，当事人不起诉离婚而单独依据民法典第一千零九十一条提起损害赔偿请求的，人民法院不予受理。第八十八条：人民法院受理离婚案件时，应当将民法典第一千零九十一条等规定中当事人的有关权利义务，书面告知当事人。在适用民法典第一千零九十一条时，应当区分以下不同情况：（一）符合民法典第一千零九十一条规定的无过错方作为原告基于该条规定向人民法院提起损害赔偿请求的，必须在离婚诉讼的同时提出。（二）符合民法典第一千零九十一条规定的无过错方作为被告的离婚诉讼案件，如果被告不同意离婚也不基于该条规定提起损害赔偿请求的，可以就此单独提起诉讼。（三）无过错方作为被告的离婚诉讼案件，一审时被告未基于民法典第一千零九十一条规定提出损害赔偿请求，二审期间提出的，人民法院应当进行调解；调解不成的，告知当事人另行起诉。双方当事人同意由第二审人民法院一并审理的，第二审人民法院可以一并裁判。第八十九条：当事人在婚姻登记机关办理离婚登记手续后，以民法典第一千零九十一条规定为由向人民法院提出损害赔偿请求的，人民法院应当受理。但当事人在协议离婚时已经明确表示放弃该项请求的，人民法院不予支持。第九十条：夫妻双方均有民法典第一千零九十一条规定的过错情形，一方或者双方向对方提出离婚损害赔偿请求的，人民法院不予支持。
如有其他疑问，可以直接向我咨询。