非法吸收公众存款罪中的退赔行为属于司法行为，而非行政行为。以下从法律性质、行为主体、法律依据及执行程序四个角度进行详细分析：
一、法律性质：刑事司法程序的延伸
退赔是刑事诉讼中针对犯罪所得财产的处置措施，属于刑事司法程序的组成部分。根据《中华人民共和国刑法》第六十四条，犯罪分子违法所得的财物应予以追缴或责令退赔，返还被害人合法财产。这一规定明确将退赔纳入刑事司法范畴，与行政行为的性质截然不同。行政行为通常涉及行政机关对违法行为的行政处罚或管理措施，而退赔是司法机关在刑事判决中直接作出的财产处置决定。
二、行为主体：司法机关的专属职权
退赔的决定和执行主体是司法机关（法院），而非行政机关。在非法吸收公众存款罪案件中，法院在判决中会明确责令犯罪分子退赔被害人损失。若犯罪分子未主动履行，法院可依据《中华人民共和国民事诉讼法》的相关规定，通过强制执行程序实现退赔。这一过程完全由司法机关主导，行政机关无权直接作出退赔决定或执行退赔。
三、法律依据：刑事法律的明确规定
退赔的法律依据主要来源于刑事法律，而非行政法律。具体包括：
这些法律条款均属于刑事法律范畴，进一步印证了退赔的司法行为性质。
四、执行程序：司法强制执行的保障
退赔的执行程序严格遵循司法强制执行的规定。若犯罪分子未主动退赔，法院可依法采取查封、扣押、冻结等强制措施，确保退赔义务得到履行。这一过程与行政强制执行有本质区别：行政强制执行是行政机关对不履行行政决定的当事人采取的强制措施，而退赔的强制执行是司法机关对不履行刑事判决的当事人采取的强制措施。
补充说明：行政处理与司法处理的界限
虽然行政机关在非法吸收公众存款案件中可能进行初步调查和取证，但一旦行为达到刑事立案标准，司法机关将介入并主导后续处理。行政处理主要是针对违法违规行为进行初步调查和处罚，如责令停业整顿、吊销金融许可证等；而司法处理则是对严重的非法吸收公众存款行为进行更为严厉的制裁，包括刑事处罚和退赔等财产处置措施。
总结与建议： 非法吸收公众存款罪中的退赔行为属于司法行为，由司法机关在刑事诉讼程序中作出决定并执行。若您或您身边的人涉及此类案件，建议及时咨询专业律师，了解退赔的具体程序和法律后果，以便更好地维护自身权益。如有任何法律问题，欢迎直接向我咨询。