关于“撤销职务后不想干了是否可以退回来”的问题，这主要取决于您与用人单位之间的具体约定以及相关法律法规的规定，以下分情况讨论：

1. 如果撤销职务是基于劳动合同或公司规章制度的明确约定：

   • 在这种情况下，撤销职务通常意味着您与用人单位之间的劳动关系发生了变更，但并不一定意味着劳动关系立即终止。如果您不想继续工作，首先需要查看劳动合同或公司规章制度中是否有关于职务撤销后员工离职的具体规定。
   • 如果合同或规章制度中明确规定了职务撤销后员工可以离职，并且没有附加其他条件（如需要提前通知、支付违约金等），那么您通常可以按照规定离职。但请注意，即使可以离职，也建议提前与用人单位沟通，以确保离职过程的顺利进行。

2. 如果撤销职务并非基于劳动合同或公司规章制度的明确约定，而是用人单位的单方面行为：

   • 在这种情况下，您首先需要确认用人单位的撤销职务行为是否合法。如果用人单位没有合法依据而单方面撤销您的职务，这可能构成违法解除劳动合同，您有权要求用人单位继续履行劳动合同或支付赔偿金。
   • 如果您不想继续工作，并且认为用人单位的撤销职务行为违法，您可以与用人单位协商离职事宜，或者向劳动争议调解仲裁机构申请调解、仲裁，甚至向人民法院提起诉讼，以维护自己的合法权益。

3. 关于“退回来”的具体含义：

   • 如果您所说的“退回来”是指退回原职位或恢复原职务，这通常取决于用人单位的意愿和实际情况。如果用人单位同意，并且您也符合原职位的要求，那么有可能实现退回原职位。但这种情况并不常见，因为职务撤销通常意味着用人单位对您的岗位安排发生了变化。
   • 如果您所说的“退回来”是指退回已支付的工资、奖金等福利待遇，这通常是不可能的。除非用人单位存在违法解除劳动合同等情形，并且您通过法律途径获得了相应的赔偿或补偿，否则您无权要求用人单位退回已支付的福利待遇。

法律建议：

• 在面对职务撤销的情况时，建议您首先查看劳动合同和公司规章制度中关于职务变更和离职的相关规定。
• 如果用人单位的行为违反了法律法规或合同约定，您可以与用人单位协商解决，或者向劳动争议调解仲裁机构申请调解、仲裁。
• 在处理此类纠纷时，建议您保留好相关证据（如劳动合同、公司规章制度、职务撤销通知等），以便在需要时证明自己的权益。

可能后果：

• 如果您未经用人单位同意擅自离职，可能会面临用人单位的追责，包括但不限于要求您支付违约金、赔偿损失等。
• 如果用人单位违法解除劳动合同，您有权要求用人单位支付赔偿金或继续履行劳动合同。

如有任何疑问或需要进一步的法律帮助，请随时向我咨询。