针对您提出的“非法集资的钱老板拿去投资药材，到期没钱退，该怎么处理”这一问题，核心结论是：您需要立即采取法律手段维护自身权益，包括向公安机关报案、参与刑事诉讼程序追赃挽损，同时可考虑通过民事诉讼途径主张权利，但需注意非法集资案件中投资者可能面临的风险。以下从刑事和民事两个角度为您详细分析：

一、刑事角度：追究集资人的刑事责任，追缴赃款

1. 非法集资的刑事定性
   根据《刑法》第176条（非法吸收公众存款罪）和第192条（集资诈骗罪），若老板以非法占有为目的，通过虚构投资项目、承诺高息回报等方式向不特定对象吸收资金，可能构成集资诈骗罪；若未非法占有目的，但扰乱金融秩序，则可能构成非法吸收公众存款罪。无论哪种情形，均属刑事犯罪。

2. 立即报案，固定证据

   • 报案主体：您作为投资者，应尽快向当地公安机关经侦部门报案，提供集资合同、转账记录、宣传材料、老板承诺还款的证据（如聊天记录、录音等）。
     
   • 报案目的：推动公安机关立案侦查，查封、冻结老板名下资产（如药材投资项目、房产、车辆等），防止资产转移。
     
   • 刑事程序：案件进入刑事诉讼后，法院会判决责令退赔集资参与人损失，若老板有退赔能力，您可按比例获得清偿。

3. 参与刑事诉讼，主张权利

   • 在侦查阶段，您可作为证人配合调查；
     
   • 在审查起诉阶段，可向检察院提交《刑事附带民事起诉状》，要求老板赔偿损失；
     
   • 在审判阶段，法院会通知集资参与人登记债权，您需按时申报，否则可能丧失受偿权。

二、民事角度：单独提起民事诉讼（需谨慎）

1. 民事诉讼的可行性
   若老板未被刑事立案，或您希望快速主张权利，可单独提起民事诉讼，要求老板返还投资款并支付利息。但需注意：

   • 合同效力问题：若集资行为被认定为非法，集资合同可能因违反法律强制性规定被认定无效，您只能主张返还本金，利息主张可能不被支持；
     
   • 执行风险：即使胜诉，若老板无财产可供执行，判决可能成为“一纸空文”。

2. 民事诉讼的优先性
   在刑事案件中，集资参与人的损失通常通过“退赔”程序优先受偿（优于其他民事债权人），因此建议优先通过刑事程序追偿，民事诉讼可作为补充手段。

三、特殊情形：药材投资项目的处理

若老板将集资款投入药材项目，您可要求公安机关或法院：

1. 查封药材资产：若药材仍存在且有价值，可申请查封、拍卖，用于清偿债务；
   
2. 追究第三方责任：若药材项目有合作方或担保方，可尝试追究其连带责任（需证据证明合作方明知或参与非法集资）。

四、风险提示与建议

1. 警惕“二次受害”：非法集资案件中，部分投资者可能因急于挽回损失，被其他“维权机构”或“高息回购”骗局再次侵害，务必保持理性；
   
2. 关注案件进展：通过公安机关、检察院或法院的案件信息公开网查询案件进度，及时申报债权；
   
3. 联合其他投资者：若涉及人数众多，可推选代表与办案机关沟通，提高效率。

总结：您应立即向公安机关报案，推动刑事立案，通过刑事追赃程序挽回损失；若条件允许，可同步准备民事诉讼材料，但需以刑事程序为主。如有进一步证据或疑问，欢迎随时向我咨询，我会结合具体案情为您制定更详细的维权方案。