非法集资公司中的行政人员是否需要退赔，取决于他们在非法集资活动中的具体角色、行为以及是否知情等多个因素。以下是对此问题的详细分析：
无知情且未参与非法集资活动的行政人员：
- 如果行政人员对公司的非法集资行为毫不知情，且没有参与到非法集资的策划、组织、实施或协助等任何环节，仅仅是履行其正常的行政工作职责，如负责办公用品采购、公司日常考勤管理等，并且未从非法集资活动中获取任何额外非法利益，那么他们通常不需要退赔，也不会受到法律处罚。
明知且积极参与非法集资活动的行政人员：
- 若行政人员明知公司在进行非法集资活动，却仍然积极参与其中，例如协助进行非法集资的宣传推广、帮助吸收资金、为非法集资活动提供财务支持或其他关键的行政辅助工作，那么他们将被视为非法集资共同犯罪的参与者。在这种情况下，他们不仅需要承担相应的法律责任，包括有期徒刑、拘役，并处罚金等刑事处罚，还可能需要退赔其参与非法集资活动所获得的非法利益。
在非法集资中起重要作用的行政人员：
- 即使行政人员并非直接的业务骨干，但如果他们的行政工作在整个非法集资活动流程中起到了不可或缺的作用，比如负责管理涉及非法集资的关键账目、协助转移非法集资所得等，他们也可能会面临法律的制裁。在这种情况下，他们同样可能需要退赔其因行政工作而间接获得的非法利益，并承担相应的法律责任。
未制止或报告非法集资活动的行政人员：
- 即便行政人员没有直接参与非法集资活动，但如果他们明知公司存在非法集资行为，却未采取任何措施予以制止或向相关部门报告，根据《防范和处置非法集资条例》，他们也可能面临一定的行政责任，包括警告、罚款等行政处罚。虽然这种情况下不一定直接涉及退赔问题，但如果他们的行为导致了非法集资活动的持续进行或扩大了损失，他们也可能在民事赔偿方面承担一定的责任。
法律责任的具体判定与退赔范围：
- 对于非法集资公司行政人员的法律责任判定，需要全面、客观地分析他们在非法集资活动中的具体角色、行为、是否知情以及造成的后果等多个因素。
- 退赔的范围通常限于行政人员因参与非法集资活动而获得的非法利益，包括但不限于工资、奖金、提成、分红等。如果行政人员没有获得任何非法利益，或者其获得的利益与非法集资活动无直接关联，那么他们通常不需要退赔。
建议：
- 如果你作为行政人员，发现自己所在的公司存在非法集资行为，应立即停止参与任何与非法集资相关的活动，并及时向相关部门报告。
- 如果你已经因参与非法集资活动而获得了非法利益，应主动退赔，以减轻或避免法律责任。
- 如果你对公司的非法集资行为存在疑问或担忧，建议咨询专业律师，以获取更具体的法律建议和指导。
如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。