社区两委成员若不想继续担任该职务，想退回当职工，这一行为是否可行，需视具体情况而定。以下是从不同角度进行的分析：

一、社区两委成员的职务性质与任免规定

社区两委，即社区党支部委员会和社区居民委员会，是社区治理的重要机构。其成员的选举、任免通常遵循《中华人民共和国村民委员会组织法》或相关地方性法规的规定。这些法规明确了社区两委成员的选举程序、任期以及罢免条件。

1. 选举与任期：社区两委成员通常由社区居民选举产生，任期一般为三年至五年，具体任期由地方性法规规定。在任期内，除非出现法定罢免情形，否则成员应继续履行职责。

2. 罢免条件：若社区两委成员希望提前离职，通常需要满足一定的条件，如因健康原因无法继续履职、因工作调动需要离开社区等，并且需要经过社区居民会议或居民代表会议的讨论和决定。

二、退回当职工的可行性分析

1. 合同与协议：

   • 若社区两委成员在担任该职务前或期间与社区或相关单位签订了劳动合同或工作协议，并且协议中明确规定了职务变更或离职的条件和程序，那么成员应按照协议执行。
   • 若协议中未明确规定，或规定不明确，则成员需要与社区或相关单位进行协商，达成一致意见后方可变更职务或离职。

2. 社区规定与内部管理：

   • 社区可能制定有内部管理规定，对社区两委成员的职务变更、离职等事项作出具体规定。成员应遵守这些规定。
   • 若社区规定与法律法规相冲突，则应以法律法规为准。

3. 实际工作需要与人员安排：

   • 社区在考虑是否允许社区两委成员退回当职工时，会综合考虑实际工作需要、人员安排以及成员的个人能力和意愿等因素。
   • 若社区认为成员退回当职工不会影响社区工作的正常开展，且成员个人也愿意并能够胜任职工岗位的工作，那么这一行为可能是可行的。

三、建议与注意事项

1. 与社区沟通：社区两委成员在考虑退回当职工前，应与社区进行充分沟通，了解社区的规定和意见，以及可能面临的后果和影响。

2. 遵守法律法规：在变更职务或离职过程中，成员应遵守相关法律法规和社区规定，确保行为的合法性和合规性。

3. 考虑个人发展：成员在做出决定前，也应考虑个人职业发展和长远规划，确保这一行为符合个人利益和发展需求。

若您有具体的法律问题或需要进一步的法律建议，可以直接向我咨询。我会根据您的具体情况，提供更为详细和专业的法律意见。