关于夫妻双方都是军人时破坏军婚罪的认定标准，我们可以从以下几个方面进行详细阐述：
一、破坏军婚罪的基本概念
破坏军婚罪，依据我国《刑法》第二百五十九条的规定，是指明知是现役军人的配偶而与之同居或结婚的行为。此罪旨在保护现役军人的婚姻关系不受侵犯。
二、认定标准
主体方面：
- 一般人都可能构成此罪，只要达到能承担刑事责任的年龄（通常指16周岁以上）且有刑事责任能力即可。
客体方面：
- 关键在于侵犯了现役军人的婚姻关系。这里的“现役军人”指的是有军籍且正在中国人民解放军部队或人民武装警察部队服役的人员。
行为方面：
- 必须是明知是现役军人的配偶，还与之同居或者结婚。
- “同居”指的是公开或秘密地一起生活，无论时间长短。
- “结婚”包含通过合法手续登记结婚以及虽未登记但以夫妻关系共同生活的事实婚姻。
主观方面：
- 必须是故意的，即清楚知道对方是现役军人的配偶还故意去破坏其婚姻关系。
- 若不知情而与之结婚或同居，则不构成此罪。
三、特殊情况
- 若行为人利用职权、从属关系，以胁迫手段奸淫现役军人的妻子，则不再以破坏军婚罪论处，而是直接依照强奸罪的规定定罪处罚，刑罚更为严厉。
四、证据收集
在认定破坏军婚罪时，证据的收集至关重要。证据可包括：
- 书证：如出轨方与现役军人配偶的书信、聊天记录、电子邮件等。
- 物证：如出轨方与现役军人配偶的亲密照片、视频、录音等视听资料。
- 证人证言：如邻居、共同朋友等目睹出轨方与现役军人配偶有不正当关系的证人的陈述。
- 其他证据：如出轨方与现役军人配偶的开房记录、租房共同居住记录等。
收集证据过程要合法合规，否则可能影响证据效力。
五、法律建议
- 对于涉及破坏军婚罪的案件，建议尽快联系专业的律师或法律机构进行咨询和代理，以确保合法权益得到有效维护。
- 公众应增强法律意识，尊重军人的婚姻家庭关系，避免触碰法律红线。
综上所述，夫妻双方都是军人时，若其中一方明知对方是现役军人的配偶而与之同居或结婚，即构成破坏军婚罪。在认定此罪时，需综合考虑主体、客体、行为和主观方面的因素，并确保证据的合法性和有效性。