结论：丈夫不交工资本身并不直接构成违法，但具体是否违法需结合夫妻双方的约定、家庭实际情况以及相关法律规定来综合判断。以下从不同角度进行分析：
一、夫妻财产制度的角度
法定财产制：
- 在我国，夫妻财产制度原则上实行的是法定财产制，即婚姻关系存续期间所得的财产，归夫妻共同所有，双方有平等的处理权。但这并不意味着丈夫必须将工资全部交给妻子管理。
- 工资作为夫妻共同财产的一部分，其管理和使用方式可以由夫妻双方协商确定。如果双方没有特别约定，丈夫有权自主管理自己的工资，但应尊重妻子的知情权和参与决策权。
约定财产制：
- 夫妻双方也可以选择约定财产制，即明确约定婚姻关系存续期间所得的财产以及婚前财产归各自所有、共同所有或部分各自所有、部分共同所有。
- 如果夫妻双方约定了工资等财产的管理和使用方式，那么丈夫应按照约定履行义务。如果丈夫违反约定不交工资，则可能构成违约，需要承担相应的法律责任。
二、家庭实际需要的角度
- 家庭实际需要也是判断丈夫是否应交工资的重要因素。如果妻子因家庭原因（如照顾子女、老人等）无法工作或收入较低，而丈夫的收入是家庭的主要经济来源，那么从家庭和谐和共同生活的角度出发，丈夫应适当考虑将部分或全部工资交给妻子管理，以满足家庭生活的需要。
- 然而，这并不意味着丈夫必须无条件地交出工资。如果丈夫有合理的理由（如个人投资、偿还债务等）需要保留工资，且能够与妻子进行充分沟通并达成共识，那么不交工资也是可以接受的。
三、法律后果的角度
- 如果丈夫不交工资的行为导致家庭生活困难或引发夫妻矛盾，妻子可以通过沟通、协商等方式解决问题。如果问题无法解决，妻子可以考虑寻求法律援助或咨询专业律师，了解自己的权利和义务，并寻求合法的解决途径。
- 在极端情况下，如果丈夫的行为构成遗弃家庭成员等违法行为，妻子还可以依法向人民法院提起诉讼，要求丈夫承担相应的法律责任。但这种情况通常需要满足一定的法律条件，如丈夫有抚养能力而拒不抚养等。
四、针对您提到的“妻子出轨”这一特殊情况
- 妻子出轨是夫妻关系中的严重问题，但它并不直接影响丈夫是否应交工资的法律判断。丈夫是否交工资应基于夫妻双方的约定、家庭实际需要以及相关法律规定来综合判断，而不是单纯基于妻子的行为。
- 如果妻子出轨导致夫妻关系破裂，双方可以通过协商、调解或诉讼等方式解决离婚问题。在离婚过程中，夫妻共同财产的分割将遵循相关法律规定和双方协商的结果。
建议：
- 夫妻双方应加强沟通，明确工资等财产的管理和使用方式，避免因财产问题引发不必要的矛盾。
- 如果遇到难以解决的问题，建议寻求专业律师的帮助，了解自己的权利和义务，并寻求合法的解决途径。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。