行政复议机关的设定是根据具体行政行为和行政机关的性质来综合考虑的，不同情况下有明确的复议机关选择规则。以下是详细的解答：

一、基本原则及规定

1. 对县级以上地方各级人民政府工作部门的具体行政行为不服：

   • 您可以向该部门的本级人民政府申请行政复议。
   • 您也可以向上一级主管部门申请行政复议。
   • 特殊规定：对于海关、金融、外汇管理等实行垂直领导的行政机关和国家安全机关的具体行政行为，您应直接向上一级主管部门申请行政复议。

2. 对地方各级人民政府的具体行政行为不服：

   • 您应向上一级地方人民政府申请行政复议。
   • 特殊规定：如果您对省、自治区人民政府设立的派出机关（如地区行政公署）所属的县级地方人民政府的具体行政行为不服，您应向该派出机关申请行政复议。

3. 对国务院部门或省、自治区、直辖市人民政府的具体行政行为不服：

   • 您应向作出该具体行政行为的国务院部门或省、自治区、直辖市人民政府申请行政复议。
   • 对行政复议决定不服的，您可以向人民法院提起行政诉讼，也可以向国务院申请裁决，国务院的裁决具有终局效力。

4. 对其他特定行政机关或组织的具体行政行为不服：

   • 县级以上地方人民政府依法设立的派出机关：您应向设立该派出机关的人民政府申请行政复议。
   • 政府工作部门依法设立的派出机构：您应向设立该派出机构的部门或其本级地方人民政府申请行政复议。
   • 法律、法规授权的组织：您应分别向直接管理该组织的地方人民政府、地方人民政府工作部门或国务院部门申请行政复议。
   • 两个或两个以上行政机关共同作出的具体行政行为：您应向其共同上一级行政机关申请行政复议。
   • 被撤销的行政机关在撤销前所作出的具体行政行为：您应向继续行使其职权的行政机关的上一级行政机关申请行政复议。

二、注意事项

• 在选择行政复议机关时，请务必仔细考虑并了解相关法律规定，以确保您的复议申请能够得到准确、有效的处理。
• 如果您不确定应向哪个机关申请行政复议，建议咨询专业的律师或相关行政机关以获取准确的指导和帮助。
• 请注意，有些行政复议是必须进行后才能向法院起诉的，而有些行政复议决定则是终结的，选择行政复议后就可能丧失了行政诉讼的权利。因此，在提起行政复议前，请务必了解这方面的法律规定。

综上所述，行政复议机关的设定是根据具体行政行为和行政机关的性质来综合考虑的，并遵循一定的原则和规定。在实际操作中，请务必仔细了解相关法律规定，并咨询专业人士以获取准确的指导和帮助。