非吸业务员不构成犯罪的情况下，自然无需退工资，也不负刑事责任；若构成犯罪，退工资（退佣金）并不完全免除刑事责任，但会作为量刑时的从轻情节予以考虑。以下从不同情况为你详细分析：
一、不构成犯罪的情况
如果业务员在非法吸收公众存款活动中，仅仅从事一些边缘性、辅助性的工作，且对非法吸收公众存款的行为并不知情，或者虽然知情但并未从中获取任何非法利益，那么根据主客观相统一的原则，该业务员可能不构成非法吸收公众存款罪。在这种情况下，业务员无需退还工资，也不负刑事责任。
二、构成犯罪的情况
退佣金与刑事责任的关系
- 非法吸收公众存款罪是一种严重的犯罪行为，它违反了国家金融管理法规，扰乱了金融秩序，并对公众的财产权益造成了实际损害。根据法律规定，无论是直接参与还是间接涉及，只要行为符合该罪的构成要件，都有可能被追究刑事责任。
- 对于非吸业务员而言，如果他们参与了非法吸收公众存款的业务，并从中获得了佣金（工资的一部分或全部），那么他们的行为就已经涉嫌犯罪。即使后来退还了佣金，也不能完全消除他们之前的犯罪行为所带来的法律后果。退佣金只是积极退赃的一种表现，它表明了业务员的悔过态度和对法律的尊重，但并不能直接等同于免除刑事责任。
量刑时的考量因素
- 在司法实践中，法院会综合考虑业务员的具体行为、情节以及其在犯罪中的作用等因素来决定是否追究刑事责任以及量刑的轻重。
- 如果业务员在共同犯罪中作用相对较小，比如只是按照上级指示完成一般性的工作任务，主观恶性不大，并且退佣后又积极配合司法机关的调查，如实供述犯罪事实等，那么法院有可能根据具体情况对其从轻、减轻处罚，甚至在情节较轻时作出不起诉决定或判处缓刑等非监禁刑。
- 相反，如果业务员在非法吸收公众存款过程中起主要作用，如积极开拓客户、大量发展下线、获取高额非法利益等，即便退佣，也难以免除其刑事责任。但在这种情况下，退佣行为依然可以在量刑时得到适当考量，从而在一定程度上减轻刑罚。
三、法律建议
- 对于业务员而言：应该时刻保持警惕，不要因为一时的贪念而走上违法犯罪的道路。如果发现自己涉及此类行为，应尽快采取措施纠正错误，积极配合司法机关的调查处理，以争取更好的法律后果。
- 对于受害者而言：如果因非法吸收公众存款行为遭受了财产损失，应及时向公安机关报案，并积极提供相关证据，以便司法机关能够及时追回损失并惩处犯罪分子。
如果你或你身边的人遇到了类似的问题，或者有任何关于劳动纠纷、合同纠纷方面的疑问，都可以直接向我咨询，我会尽我所能为你提供专业的法律帮助。