如果某人并未在聚众淫乱现场却被指责犯有此罪，需根据具体情况分析是否构成聚众淫乱罪。针对这一问题，我们可以从以下几个方面进行剖析：

一. 聚众淫乱罪的构成要件

1. 客体要件：本罪侵犯的客体是公共秩序，即通过社会规则维护的公共生活状态。
2. 客观要件：需具备聚众行为和淫乱行为两大特征。聚众行为指的是纠集三人以上进行活动；淫乱行为则指群奸群宿或其他淫乱活动。
3. 主观要件：表现为直接故意，即明知行为会危害社会，仍希望这种结果发生。
4. 主体要件：本罪的主体为一般主体，即任何达到刑事责任年龄、具有刑事责任能力的自然人均可构成。

二. 不在现场与定罪的关系

• 关键点：是否参与聚众淫乱活动。若某人并未在现场参与聚众淫乱活动，即未实施聚众或淫乱行为，则不满足聚众淫乱罪的客观要件。
• 分析：仅因被指责或怀疑，并不能直接定罪。定罪需基于确凿的证据，证明该人确实参与了聚众淫乱活动。

三. 法律依据

• 根据《中华人民共和国刑法》第三百零一条，聚众进行淫乱活动的，对首要分子或者多次参加的，才处五年以下有期徒刑、拘役或者管制。若某人并未参与，则不适用此条款。

综上所述，如果某人并未在聚众淫乱现场，且没有确凿证据证明其参与了聚众淫乱活动，那么该人不应被定罪为聚众淫乱罪。在面对此类指责时，应保持冷静，积极收集证据以证明自己的清白。如有进一步需要，您可以继续咨询我。