结论：公司不与管理层商量直接调走下属是否违法，需根据具体情况判断，主要涉及劳动合同的约定、公司规章制度的合法性以及调岗的合理性等因素。以下从不同角度进行分析：
一、劳动合同的约定
劳动合同中有明确约定调岗条款：
- 如果劳动合同中明确约定了公司有权根据工作需要调整员工的工作岗位，且该条款不违反法律法规的强制性规定，那么公司调岗的行为可能具有合法性。但即便如此，公司也应遵循合理、公平的原则，不得滥用调岗权。
劳动合同中没有明确约定调岗条款：
- 如果劳动合同中没有明确约定调岗条款，公司单方面调岗可能构成违约。员工有权拒绝不合理的调岗安排，并可以依据劳动合同的约定或相关法律法规维护自己的合法权益。
二、公司规章制度的合法性
公司规章制度中有调岗规定：
- 如果公司规章制度中明确规定了调岗的条件、程序等，且该规章制度经过民主程序制定并公示，员工也已知悉并同意，那么公司按照规章制度进行调岗可能具有合法性。但同样，调岗应合理、公平，不得损害员工的合法权益。
公司规章制度中没有调岗规定或规定不合法：
- 如果公司规章制度中没有调岗规定，或者调岗规定违反了法律法规的强制性规定（如未经员工同意擅自调岗、调岗后工资待遇大幅降低等），那么公司调岗的行为可能构成违法。员工有权拒绝并可以依法维权。
三、调岗的合理性
调岗具有合理性：
- 即使劳动合同或公司规章制度中有调岗条款，公司调岗也应具有合理性。合理性通常包括调岗的必要性、调岗后的工作性质与原工作相当、调岗后工资待遇不降低等。如果调岗明显不合理，员工有权拒绝。
调岗不具有合理性：
- 如果调岗不具有合理性，如调岗后工作性质与原工作截然不同、调岗后工资待遇大幅降低等，那么公司调岗的行为可能构成违法。员工可以拒绝调岗，并可以依据相关法律法规要求公司承担相应的法律责任。
四、法律建议
对于员工：
- 如果公司未经商量直接调岗，员工应首先查看劳动合同和公司规章制度中是否有相关约定。
- 如果认为调岗不合理或违法，员工可以与公司协商解决，要求公司撤销调岗决定或提供合理的调岗方案。
- 如果协商无果，员工可以向当地劳动监察部门投诉或申请劳动仲裁，维护自己的合法权益。
对于公司：
- 公司在调岗前应与管理层充分沟通，确保调岗的合理性和合法性。
- 调岗时应遵循劳动合同和公司规章制度的约定，不得滥用调岗权。
- 如果调岗涉及员工切身利益（如工资待遇、工作地点等），应提前与员工协商并达成一致意见。
举例说明：假设某员工与公司签订的劳动合同中明确约定了公司有权根据工作需要调整员工的工作岗位，但调岗后工资待遇不得降低。现公司因业务需要调整该员工的工作岗位，且调岗后的工资待遇与原岗位相当。在此情况下，公司调岗的行为可能具有合法性。但如果公司调岗后大幅降低该员工的工资待遇，则可能构成违法。
后续行动建议：如果您或您所在的公司面临类似问题，建议直接向我咨询，以便根据具体情况提供更详细的法律建议和解决方案。