非法集资行政案件主要由地方政府负责管辖，具体由地方政府组织有关部门进行受理、调查、立案、认定和处置善后等工作。以下是对此结论的详细阐述：

1. 地方政府的主导地位：

   • 根据《防范和处置非法集资条例》，省、自治区、直辖市人民政府对本行政区域内防范和处置非法集资工作负总责，实行属地管理原则。这意味着地方政府是处置非法集资案件的第一责任人，需要全面负责所在地区的非法集资处置工作。

2. 各部门的协同作用：

   • 虽然地方政府是主导，但金融监管部门（如银保监会等）也负责监管和调查非法集资行为，对银行业金融机构、保险机构等的非法集资相关业务进行监管、调查和处置。
   • 公安机关在非法集资案件中承担刑事侦查职能，对涉嫌犯罪的行为进行立案侦查，并采取必要的侦查措施。
   • 司法机关（包括人民检察院和人民法院）则负责案件的审查起诉和审判工作，确保案件的合法合规处理。

3. 管辖的具体实施：

   • 在刑事案件中，公安机关负责侦查，人民检察院负责审查起诉，人民法院负责审判。这一流程遵循《中华人民共和国刑事诉讼法》的相关规定。
   • 在民事案件中，如果非法集资行为引发民事纠纷，投资者可以向有管辖权的人民法院提起民事诉讼，这遵循《中华人民共和国民事诉讼法》的管辖原则。

综上所述，非法集资行政案件主要由地方政府负责管辖，但金融监管部门、公安机关和司法机关也各自在其职责范围内发挥重要作用。如果你或你身边的人遭遇非法集资行为，建议第一时间向地方政府或相关监管部门举报，以便及时得到处理。