关于非吸投资人早退出后利息是否需要退回的问题，这主要取决于具体的法律规定和案件情况，但通常情况下，非法吸收公众存款案件中，投资人获得的利息可能需要退回。以下从几个角度进行详细分析：
法律原则角度：
- 非法吸收公众存款行为本身违反了国家金融管理法规，破坏了金融秩序。因此，从法律原则上讲，因非法行为所获得的利益，包括利息，通常是不受法律保护的。
- 在非法吸收公众存款案件中，法院往往会判决投资人退还已获得的利息，以恢复金融秩序和公平原则。
案件处理角度：
- 在实际案件处理中，如果投资人已经退出了非法吸收公众存款的活动，但之前获得了利息，那么这些利息可能会被视为非法所得，需要被追缴或退还。
- 法院在判决时，会综合考虑投资人的实际损失、非法吸收公众存款的数额、情节以及投资人的过错程度等因素，来决定是否要求投资人退还利息以及退还的数额。
实际操作角度：
- 对于投资人来说，如果已经被要求退还利息，应当积极配合，按照法院或相关部门的指示进行退还。
- 如果投资人对退还利息有异议，可以通过法律途径进行申诉或辩护，但需要提供充分的证据来支持自己的观点。
特殊情况考虑：
- 如果投资人在非法吸收公众存款活动中也是受害者，且其获得的利息并未超过其实际投入的本金，那么在某些情况下，法院可能会考虑不要求其退还全部利息或部分利息。
- 但这种情况需要具体案件具体分析，不能一概而论。
法律建议：
- 对于已经退出非法吸收公众存款活动的投资人来说，如果收到了要求退还利息的通知或判决，应当认真对待，及时咨询专业律师（如我，吴法宝律师，专注于债权债务领域）以了解自己的权利和义务。
- 如果投资人对退还利息有异议或认为自己的权益受到了侵害，可以通过法律途径进行申诉或辩护，以维护自己的合法权益。
可能后果：
- 如果投资人不按照法院或相关部门的指示退还利息，可能会面临法律制裁，包括但不限于罚款、拘留等。
- 同时，不退还利息也可能影响投资人的信用记录和社会声誉。
综上所述，非法吸收公众存款案件中，投资人获得的利息通常需要退回。但具体情况还需根据案件事实和法律规定进行综合判断。如果您有进一步的疑问或需要具体的法律帮助，请直接向我咨询。