结论前置：在您描述的“出轨”情形下，一般不能直接起诉对方，但根据具体情况，可能存在其他法律途径来维护您的权益或追究对方责任。以下从不同角度为您详细分析：
出轨行为本身的法律性质：
- 出轨，通常指的是夫妻一方在婚姻关系存续期间与第三者发生不正当男女关系。从法律层面讲，单纯的出轨行为并不直接构成犯罪，也不必然导致民事上的赔偿责任（除非出轨行为同时构成了重婚或与他人同居等法定过错情形）。
- 因此，如果您仅以“出轨”为由想起诉对方，这在法律上通常是不被支持的，因为出轨本身并不直接产生法律上的赔偿责任或刑事责任。
可能涉及的法律责任：
- 重婚罪：如果出轨行为升级为重婚，即一方在婚姻关系存续期间又与他人结婚或以夫妻名义共同生活，那么这可能构成重婚罪。但重婚罪的认定需要严格的证据支持，且通常是由受害方（即您的配偶）提起刑事自诉。
- 离婚损害赔偿：在离婚诉讼中，如果一方能够证明另一方存在出轨等过错行为，且该过错行为是导致离婚的原因之一，那么无过错方有权请求损害赔偿。但这里的赔偿请求是针对您的配偶，而不是出轨的对方。
- 侵犯名誉权等：如果出轨行为伴随着对您的名誉、隐私等权益的侵犯（如公开传播不实信息、恶意诽谤等），那么您可能可以依据相关法律规定，起诉对方侵犯您的名誉权、隐私权等，要求对方承担相应的民事责任。
建议与行动：
- 收集证据：如果您认为出轨行为对您造成了损害，并考虑采取法律行动，那么首先需要收集相关证据。这些证据可能包括聊天记录、照片、视频、证人证言等，用于证明出轨行为的存在以及该行为对您的具体损害。
- 咨询专业律师：在采取任何法律行动之前，建议您咨询专业律师，特别是擅长婚姻家庭领域的律师。律师可以根据您的具体情况，为您提供专业的法律意见，帮助您评估案件的胜诉可能性以及可能获得的赔偿金额。
- 考虑和解或调解：在某些情况下，通过和解或调解来解决纠纷可能更为高效和成本效益。您可以与对方或您的配偶进行协商，尝试达成一个双方都能接受的解决方案。
最后，出轨行为虽然可能给您带来情感上的伤害和困扰，但在法律上，直接起诉出轨的对方通常并不是最佳的选择。如果您面临这样的情况，建议保持冷静，收集证据，并咨询专业律师以获取更具体的法律建议。如果您有任何法律问题或需要进一步的帮助，请直接向我咨询。