针对您提出的“不签异动单被交到人事那会怎样”的问题，这主要涉及到公司内部的调岗流程以及员工对此的应对措施。以下是我为您提供的详细解答：
首先，我们需要明确的是，异动单通常是公司用于记录员工岗位变动、薪资调整等重要信息的文件。当公司提出调岗需求，并要求员工签署异动单时，这往往意味着公司已经对调岗进行了充分的考虑和规划，并认为这是符合公司发展和员工个人发展的合理举措。
如果您拒绝签署异动单，公司可能会根据具体情况采取以下措施：
沟通协商：公司可能会首先与您进行沟通，了解您拒绝签署的原因，并尝试通过协商找到双方都能接受的解决方案。这可能包括调整调岗方案、提供额外的培训或支持等。
按旷工处理：如果您拒绝调岗且未到新岗位上班，也未向公司说明合理原因，公司可能会按照旷工处理。旷工是违反公司规章制度的行为，可能会影响您的考勤记录、薪资发放以及职业发展。
不服从工作安排处理：如果您继续到原岗位上班而不到新岗位工作，公司可能会认为您不服从工作安排。这同样可能对您的职业发展产生不利影响，并可能引发公司内部的纪律处分。
加强考核与消极怠工处理：如果您虽然到新岗位工作，但不履行岗位职责或不切实履行岗位职责，公司可能会加强考核，并按照消极怠工处理。这可能导致您的绩效评估结果不佳，进而影响薪资和晋升机会。
解除劳动合同：在极端情况下，如果公司依据《劳动合同法》的相关规定（如劳动合同订立时所依据的客观情况发生重大变化，致使劳动合同无法履行），与您协商调岗但未能达成协议，且您拒绝签署异动单并持续不配合公司安排，公司可能会提前三十日以书面形式通知您本人或者额外支付您一个月工资后，解除劳动合同，并向您支付经济补偿金。但请注意，这种情况需要公司保留充分的证据证明客观情况发生重大变化，并且已经与您进行了充分的协商。
因此，我建议您在面对调岗需求时，首先与公司进行充分的沟通，了解调岗的具体原因和目的，以及新岗位的工作内容和要求。如果您对调岗有疑虑或担忧，可以提出自己的意见和建议，并与公司共同寻找解决方案。如果最终决定拒绝调岗，也请务必向公司说明合理原因，并尽量配合公司的后续安排，以避免不必要的纠纷和损失。