男人和异性聊天不一定算出轨。具体分析如下：

1. 从法律层面看：单纯的聊天行为，无论是日常寒暄还是工作交流，都难以直接证实为出轨。出轨在法律语境中通常指的是违背夫妻忠实义务的婚外性行为。而聊天，即便是频繁或有暧昧内容的聊天，也仅仅是言语上的互动，并未达到发生实质性不正当关系的程度。

2. 考虑聊天内容和情境：若聊天内容包含暧昧、情感表达或约定见面等露骨信息，这可能被视为出轨的间接证据。然而，若是普通的、正常的社交交流，如询问工作进度、讨论日常话题等，则通常不会被认定为出轨证据。

3. 结合其他证据：在法律实践中，单一的聊天记录往往不足以证明出轨事实。通常需要结合其他证据，如转账记录、亲密照片、视频、证人证言等，形成完整的证据链，才能更有力地证明出轨行为。

综上所述，男人和异性聊天是否算出轨，需要综合考虑聊天内容的性质、频率、情感倾向以及是否有其他辅助证据等因素。如果你对此类问题有进一步的法律疑问或需要更具体的法律建议，请直接向我咨询。