结论：您可以基于个人职业规划、岗位调整的合理性以及劳动合同的约定等角度，礼貌且明确地拒绝老板让您回去上班但非管理岗位的要求。以下是从不同角度给出的详细分析和建议：
一、基于个人职业规划的拒绝
明确个人职业目标：
- 您可以在回复中表明，您对自己的职业发展有明确的规划，当前或未来的职业目标更倾向于管理岗位，因此无法接受非管理岗位的工作安排。
- 例如：“感谢您对我的信任和邀请，但经过深思熟虑，我认为我的职业规划更侧重于管理岗位的发展，因此无法接受非管理岗位的工作安排。”
强调职业发展的连续性：
- 您可以强调，接受非管理岗位可能会打乱您的职业发展计划，影响您在管理领域的专业积累和经验提升。
- 例如：“我深知管理岗位对于我职业发展的重要性，接受非管理岗位可能会使我的职业发展出现断层，不利于我长期目标的实现。”
二、基于岗位调整合理性的拒绝
质疑岗位调整的合理性：
- 您可以询问老板岗位调整的具体原因，并表达您对岗位调整合理性的质疑。如果岗位调整缺乏合理的解释或依据，您可以据此拒绝。
- 例如：“我很好奇，为什么您希望我回去担任非管理岗位？这个调整是基于什么考虑呢？我认为，在没有充分理由的情况下，这样的岗位调整可能并不合理。”
强调岗位匹配度：
- 您可以强调，您过去在管理岗位上的表现和经验与当前非管理岗位的要求可能并不匹配，因此无法胜任新的工作岗位。
- 例如：“我在管理岗位上积累了丰富的经验和技能，这些经验和技能可能并不完全适用于非管理岗位。因此，我认为我可能无法胜任您提出的新工作岗位。”
三、基于劳动合同的拒绝
审查劳动合同约定：
- 您可以回顾您与雇主签订的劳动合同，查看其中是否明确约定了您的岗位、职责和工作地点等条款。如果劳动合同中明确约定了您为管理岗位，且未提及岗位调整的可能性，您可以据此拒绝非管理岗位的工作安排。
- 例如：“根据我们签订的劳动合同，我明确被聘为管理岗位。在没有双方协商一致的情况下，我无法接受非管理岗位的工作安排。”
强调合同变更的程序性：
- 您可以指出，根据劳动法的规定，劳动合同的变更需要双方协商一致，并签订书面变更协议。如果雇主未经您同意擅自调整您的岗位，您有权拒绝。
- 例如：“根据劳动法的规定，劳动合同的变更需要双方协商一致。在没有我的同意下，您不能单方面调整我的岗位。因此，我无法接受非管理岗位的工作安排。”
四、沟通技巧与注意事项
保持礼貌和尊重：
- 在拒绝老板的要求时，务必保持礼貌和尊重的态度，避免使用过于直接或冒犯性的语言。
提供合理的解释和依据：
- 在拒绝时，尽量提供合理的解释和依据，以增加说服力。您可以结合上述角度中的一点或多点进行阐述。
考虑未来关系：
- 在拒绝时，也要考虑与老板的未来关系。您可以表达您对公司的感激之情，并希望未来有机会再次合作。
示例回复：“感谢您对我的信任和邀请。经过深思熟虑，我认为我的职业规划更侧重于管理岗位的发展，且根据我们签订的劳动合同，我明确被聘为管理岗位。在没有双方协商一致的情况下，我无法接受非管理岗位的工作安排。我深知管理岗位对于我职业发展的重要性，也感谢公司过去对我的培养和支持。希望未来有机会再次为公司贡献我的力量。”
如有更多疑问或需要进一步的法律帮助，请随时向我咨询。