在没有实际证据的情况下，一般不能直接认定或怀疑某人为“奸夫”，因为这样的怀疑缺乏法律上的依据和支撑。以下从几个角度为你详细分析：

一、法律证据的重要性

在法律程序中，证据是认定事实、作出判决的基础。没有实际证据，仅凭怀疑或推测，是无法在法律上确立某人的特定身份或行为的。在涉及婚姻忠诚、性关系等敏感问题时，法律更是要求有确凿的证据来支持任何指控或怀疑。

二、怀疑的合理性边界

1. 个人怀疑：作为个人，你可能基于某些观察、感觉或传闻对某人产生怀疑。然而，这种怀疑仅停留在个人层面，无法构成法律上的证据或指控。在没有实际证据的情况下，过度宣扬或传播这种怀疑可能构成对他人名誉权的侵害。
2. 法律程序中的怀疑：在法律程序中，如刑事诉讼或民事诉讼中，怀疑必须转化为具体的、可证明的指控，并附有相应的证据。否则，法院将不会采纳这种怀疑作为判决的依据。

三、如何处理没有实际证据的怀疑

1. 收集证据：如果你确实对某人有怀疑，并希望将其转化为法律上的指控或寻求法律救济，那么首要任务是收集证据。这可能包括监控录像、通讯记录、证人证言等。然而，必须注意，收集证据的过程必须合法，不得侵犯他人的合法权益。
2. 寻求法律帮助：在收集证据的过程中，如果你遇到困难或不确定如何操作，可以寻求专业律师的帮助。律师可以为你提供法律建议，指导你如何合法、有效地收集证据。
3. 尊重法律程序：即使你收集到了某些证据，也必须通过合法的法律程序来提出指控或寻求救济。这通常包括向警方报案、提起民事诉讼等。在这个过程中，你必须遵守法律程序，尊重法院的判决。

四、可能面临的法律后果

1. 名誉权侵害：如果你在没有实际证据的情况下公开宣扬或传播对某人的怀疑，可能构成对他人名誉权的侵害。这可能导致你面临民事赔偿、道歉等法律责任。
2. 诽谤罪：在极端情况下，如果你的行为构成诽谤罪（即故意捏造并散布虚构的事实，足以贬损他人人格，破坏他人名誉，情节严重的行为），你可能面临刑事处罚。

总结来说，没有实际证据的情况下，不能直接认定或怀疑某人为“奸夫”。如果你对某人有怀疑，并希望采取法律行动，那么首要任务是收集证据，并寻求专业律师的帮助。同时，你必须尊重法律程序，避免侵犯他人的合法权益。如果你有任何具体的法律问题或需要进一步的法律建议，请直接向我咨询。