对于非法吸收公众存款案件中不是违法所得的财物，通常会根据其性质、来源以及与案件的关联性等因素，依法进行分类处理。具体来说：
与案件无关的合法财物：
- 如果查封、扣押、冻结的财物经查明确实与案件无关，即这些财物并非通过非法吸收公众存款活动获得，也不是用于非法活动的工具或资金，那么根据《中华人民共和国刑事诉讼法》的相关规定，应当在三日以内解除查封、扣押、冻结，并予以退还。这是保障公民合法财产权益的重要体现。
供犯罪所用的本人财物：
- 对于那些虽然不是违法所得，但被用于非法吸收公众存款活动的本人财物，如用于宣传的资料、设备，或者用于接收、转移资金的账户等，根据《中华人民共和国刑法》第六十四条的规定，应当予以没收。这些财物因为直接参与了犯罪活动，所以被视为犯罪工具，需要依法处理。
其他需要处理的财物：
- 在非法吸收公众存款案件中，还可能存在一些其他需要处理的财物，如犯罪嫌疑人自愿上交的财物、与案件有关但难以查清来源的财物等。对于这些财物，应当根据具体情况，依据相关法律法规进行妥善处理。例如，如果犯罪嫌疑人自愿上交财物以减轻罪责，且这些财物并非必须没收或退赔的，可以考虑在量刑时予以酌情考虑。
在处理这些财物时，需要遵循以下原则：
- 依法处理：所有处理行为都必须严格依据法律法规进行，确保程序的合法性和结果的公正性。
- 保护合法财产权益：对于与案件无关的合法财物，应当及时退还，保护公民的合法财产权益不受侵害。
- 打击犯罪活动：对于供犯罪所用的本人财物，应当依法没收，以打击犯罪活动，维护社会秩序。
建议：
- 如果您或您身边的人涉及非法吸收公众存款案件，且对财物的处理有疑问或担忧，建议及时咨询专业律师，了解具体的法律程序和权益保障措施。
- 在处理这类案件时，务必保持冷静和理性，积极配合司法机关的调查和处理工作，以维护自身的合法权益和社会的公平正义。