结论：双方都不知道对方有家庭的情况下，男方妻子一般不能直接起诉“双方”（即您和男方），但可能根据具体情况对男方提起诉讼，并可能间接影响到您。以下从不同角度为您详细分析：

1. 从民事诉讼的角度：

   • 男方妻子若要提起诉讼，通常需要明确被告和具体的诉讼请求。在您和男方均不知对方有家庭的情况下，男方妻子一般不能将您作为共同被告提起诉讼，因为您并非其婚姻关系的直接当事人，也没有直接侵害其婚姻权益的行为（如重婚等）。
   • 男方妻子更可能的是对男方提起离婚诉讼，并在诉讼中主张男方的过错行为（如与他人同居等，如果存在的话），但这需要她提供充分的证据来证明。

2. 从刑事责任的角度：

   • 在您和男方均不知对方有家庭的情况下，通常不构成重婚罪。重婚罪要求行为人明知自己或对方有配偶而仍然与之结婚或同居，而您的情况并不符合这一构成要件。
   • 因此，从刑事责任的角度来看，您和男方都不会因为这种情况而面临刑事指控。

3. 从道德和实际影响的角度：

   • 尽管法律上可能不直接追究您的责任，但这种情况仍然可能对您的道德形象和人际关系产生负面影响。特别是如果男方妻子将此事公开或采取其他行动，可能会对您的生活和工作造成困扰。
   • 此外，如果男方因此事被起诉离婚，并涉及到财产分割、子女抚养等问题，虽然这些问题主要发生在男方和其妻子之间，但也可能间接影响到您，特别是如果男方因此事产生经济压力或情绪波动，进而影响到与您的关系。

建议：

• 如果您发现自己处于这种情况中，建议尽快与男方沟通，了解真相，并考虑是否继续这段关系。
• 如果男方妻子已经采取行动或可能采取行动，建议您咨询专业律师（即向我咨询），了解您的法律权益和可能的法律风险，以便做好应对准备。
• 在任何情况下，都应尊重他人的婚姻和家庭关系，避免卷入不必要的纠纷和麻烦。

如果您有任何进一步的疑问或需要更具体的法律建议，请随时向我咨询。