非法集资参与人一般不能直接向借款人主张权利，但需根据具体情况分析。以下从不同角度为你详细阐述：
一、非法集资的法律性质与参与人地位
非法集资活动通常违反国家金融管理法规，扰乱金融秩序，具有违法性。在非法集资活动中，参与人往往是通过向不特定对象吸收资金的方式参与其中，其地位并非传统意义上的债权人。因为非法集资行为本身不受法律保护，所以参与人不能简单地依据借贷关系向借款人主张权利。
二、非法集资参与人权利主张的障碍
合同无效：如果非法集资行为被认定为无效，那么基于该行为所签订的借贷合同也将被视为无效。根据《民法典》的相关规定，无效的合同自始没有法律约束力，因此参与人无法依据无效的合同向借款人主张还款权利。
法律保护范围：法律对非法集资参与人的保护是有限的。在非法集资案件中，法律更侧重于打击非法集资行为本身，保护广大投资者的合法权益不受进一步侵害，而不是直接保护非法集资参与人的“投资”回报。因此，参与人难以通过法律途径直接向借款人追讨资金。
三、特殊情况下的权利主张
尽管非法集资参与人一般不能直接向借款人主张权利，但在某些特殊情况下，他们可能仍有一定的救济途径：
刑事追缴与退赔：在非法集资案件中，如果借款人因非法集资行为被追究刑事责任，那么法院在判决时可能会责令其退赔集资参与人的损失。这种情况下，参与人可以通过刑事追缴程序来追回部分或全部损失。但需要注意的是，这种退赔通常是在刑事判决后执行，且退赔金额可能受到借款人财产状况、退赔比例等多种因素的影响。
民事诉讼的例外：在某些极端情况下，如果非法集资行为并未被完全认定为非法，或者参与人能够证明其与借款人之间存在真实的借贷关系（而非非法集资关系），那么他们可能仍有权通过民事诉讼途径向借款人主张权利。但这种情况非常罕见，且需要参与人提供充分的证据来支持其主张。
四、建议与风险提示
增强风险意识：非法集资活动往往伴随着高风险，参与人应增强风险意识，谨慎投资，避免陷入非法集资的陷阱。
及时报案：如果发现自己参与了非法集资活动，应及时向公安机关报案，以便尽快启动刑事追缴程序，追回损失。
咨询专业律师：在涉及非法集资的问题上，由于法律关系复杂且涉及刑事、民事等多个领域，因此建议参与人及时咨询专业律师，以便更好地了解自己的权利和义务，并寻求合法的救济途径。
如果你有进一步的法律问题或需要更具体的法律建议，请直接向我咨询。