结论：用人单位在职工未告知怀孕事实的情况下，不能仅凭考核绩效就随意对职工进行降职、降薪或调岗。这一行为可能涉及违法，具体需根据实际情况判断。

分析如下：

1. 从劳动法保护女职工的角度：

   • 根据《中华人民共和国劳动法》以及《女职工劳动保护特别规定》等相关法律法规，女职工在孕期、产期、哺乳期内，用人单位不得因其怀孕、生育、哺乳而降低其工资、予以辞退、与其解除劳动或者聘用合同。这是法律对女职工的特殊保护，旨在保障她们在特殊时期的合法权益。
   • 因此，即使职工未告知用人单位其怀孕的事实，用人单位也不能以此为由，仅凭考核绩效就对其进行降职、降薪或调岗。这种行为可能构成对女职工权益的侵犯。

2. 从考核绩效与岗位调整的关系角度：

   • 考核绩效通常是用人单位对职工工作表现的一种评价方式，它可能作为职工晋升、加薪或降职、降薪的依据之一。然而，这种调整必须基于合法、合理、公正的原则，并且不能违反法律法规的强制性规定。
   • 在职工怀孕的情况下，即使其考核绩效不佳，用人单位也不能直接对其进行降职、降薪或调岗。因为怀孕并不是职工工作表现不佳的合理理由，且这种调整可能违反法律对女职工的特殊保护。

3. 从用人单位的举证责任角度：

   • 如果用人单位主张因职工考核绩效不佳而对其进行降职、降薪或调岗，那么用人单位需要承担举证责任，证明职工的工作表现确实不佳，并且这种调整是合理、必要的。
   • 在职工怀孕的情况下，用人单位还需要证明这种调整与职工的怀孕无关，且不会对其孕期、产期、哺乳期的权益造成损害。这通常是一个难以完成的任务，因为怀孕本身就可能对职工的工作表现产生一定影响。

法律建议：

• 对于职工而言，如果用人单位在其怀孕期间未经合法程序就对其进行降职、降薪或调岗，职工可以依法向劳动监察部门投诉或申请劳动仲裁，维护自己的合法权益。
• 对于用人单位而言，应当严格遵守法律法规，尊重和保护女职工的合法权益。在需要对职工进行岗位调整时，应当遵循合法、合理、公正的原则，并充分考虑职工的实际情况和权益。

可能后果：

• 如果用人单位违法对怀孕职工进行降职、降薪或调岗，可能面临劳动监察部门的处罚，包括罚款、责令改正等。
• 同时，用人单位还可能因侵犯职工权益而承担民事赔偿责任，如支付赔偿金、恢复原岗位等。

如有更多疑问或需要进一步的法律帮助，请直接向我咨询。