不可以。无论妻子是否履行夫妻生活义务，男方出轨均不具有法律上的正当性，且可能承担相应法律责任。以下从法律和道德两个层面展开分析：

一、法律层面：出轨行为本身不因对方“未履行义务”而合法化

1. 夫妻忠实义务是法定义务
   根据《民法典》第1043条，夫妻应当互相忠实、互相尊重。这一义务不因一方是否履行性义务而免除。即使妻子拒绝夫妻生活，男方仍需通过合法途径（如沟通、协商或离婚）解决问题，而非通过出轨逃避责任。

2. 出轨可能引发多重法律后果

   • 离婚诉讼中的过错认定：若男方出轨导致离婚，妻子可依据《民法典》第1091条主张“重大过错”，要求多分财产或索赔精神损害抚慰金。
     
   • 损害配偶权益：出轨行为可能侵犯配偶的“配偶权”（人格权范畴），妻子有权要求停止侵害、赔礼道歉甚至赔偿损失。
     
   • 特殊情形下的刑事风险：若出轨涉及重婚（与他人登记结婚或以夫妻名义同居），可能构成重婚罪，面临2年以下有期徒刑或拘役。

3. 妻子拒绝夫妻生活≠男方可“免责”
   性义务是夫妻关系的一部分，但需以自愿为前提。若妻子因健康、心理等原因拒绝，男方应通过沟通、婚姻咨询或离婚解决，而非以出轨报复。法律未将“性拒绝”列为出轨的合法理由。

二、道德层面：出轨违背婚姻契约精神

婚姻不仅是法律关系，更是道德承诺。即使夫妻间存在矛盾，也应通过理性方式解决，而非以背叛伤害对方。出轨行为会严重破坏信任，导致家庭关系破裂，甚至影响子女成长，需承担道德谴责。

建议：合法途径解决婚姻危机

若男方因妻子拒绝夫妻生活感到痛苦，可采取以下措施：

1. 与妻子坦诚沟通：了解拒绝原因（如健康问题、情感疏离等），共同寻求解决方案。
   
2. 寻求婚姻咨询：通过专业辅导改善夫妻关系，重建信任。
   
3. 协商离婚或诉讼离婚：若感情确已破裂，可依法解除婚姻关系，避免进一步伤害。

总结：出轨不是解决婚姻问题的合法或合理方式。无论面临何种困境，都应遵守法律和道德底线，通过理性途径维护自身权益。如有具体法律问题，可进一步向我咨询。