确定行政复议机关需根据具体行政行为和行政机关的性质综合考虑，不同情形下有明确的复议机关选择规则。以下是具体分析：

一、一般情况下的复议机关确定

1. 对县级以上地方各级人民政府工作部门的具体行政行为不服：

   • 可以向该部门的本级人民政府申请行政复议；
   • 也可以向上一级主管部门申请行政复议。
   • 举例：如果你对某市税务局的具体行政行为不服，你可以选择向该市税务局的上一级税务局（如省税务局）或者该市人民政府申请行政复议。

2. 对海关、金融、外汇管理等实行垂直领导的行政机关和国家安全机关的具体行政行为不服：

   • 应直接向上一级主管部门申请行政复议。
   • 举例：如果你对某海关的具体行政行为不服，你只能向该海关的上一级海关申请行政复议，而不能向该海关所在地的本级人民政府申请。

3. 对地方各级人民政府的具体行政行为不服：

   • 向上一级地方人民政府申请行政复议。
   • 举例：如果你对某县人民政府的具体行政行为不服，你应向该县人民政府的上一级人民政府（如市人民政府）申请行政复议。

4. 对政府工作部门依法设立的派出机构的具体行政行为不服：

   • 若派出机构以自己的名义作出具体行政行为，当事人可以选择向设立该派出机构的部门或该部门的本级地方人民政府申请行政复议。
   • 举例：如果你对某市公安局派出所的具体行政行为不服，你可以选择向市公安局或者该市公安局所在地的区人民政府申请行政复议。

5. 对法律、法规授权的组织的具体行政行为不服：

   • 应分别向直接管理该组织的地方人民政府、地方人民政府工作部门或国务院部门申请行政复议。
   • 举例：如果你对某行业协会（经法律、法规授权）的具体行政行为不服，你应向直接管理该行业协会的地方人民政府或相关部门申请行政复议。

6. 对两个或两个以上行政机关共同作出的具体行政行为不服：

   • 向其共同上一级行政机关申请行政复议。
   • 举例：如果你对某市环保局和市住建局共同作出的具体行政行为不服，你应向这两个部门的共同上一级行政机关（如市人民政府）申请行政复议。

7. 对被撤销的行政机关在撤销前所作出的具体行政行为不服：

   • 向继续行使其职权的行政机关的上一级行政机关申请行政复议。
   • 举例：如果某行政机关被撤销，但其在撤销前作出了一个具体行政行为，你应向继续行使该行政机关职权的部门的上一级行政机关申请行政复议。

二、特殊情况下的复议机关确定

1. 对国务院部门或省、自治区、直辖市人民政府的具体行政行为不服：

   • 向作出该具体行政行为的国务院部门或省、自治区、直辖市人民政府申请行政复议。
   • 对行政复议决定不服的，可以向人民法院提起行政诉讼，也可以向国务院申请裁决，国务院的裁决具有终局效力。
   • 举例：如果你对国家税务总局的具体行政行为不服，你应向国家税务总局申请行政复议；如果对复议决定仍不服，你可以选择向人民法院提起行政诉讼或向国务院申请裁决。

2. 对省、自治区人民政府依法设立的派出机关所属的县级地方人民政府的具体行政行为不服：

   • 应向该派出机关申请行政复议。
   • 举例：如果你对某地区行政公署（省人民政府的派出机关）所属的某县人民政府的具体行政行为不服，你应向该地区行政公署申请行政复议。

在实际操作中，如果不确定应向哪个机关申请行政复议，或者对复议机关的选择有疑问，可以直接向我咨询。我会根据你的具体情况，为你提供准确的指导和帮助，确保你的复议申请能够准确、高效地得到处理。