针对您提出的“监理不履行职责怎么办”这一问题，我将从判定主体、法律依据以及处理建议三个方面为您进行详细解答。
一、监理不履行职责的判定主体
建设单位（业主）：
- 建设单位与监理单位签订的监理合同是判断监理是否履职的基础。若监理未按合同约定进行工程监督、质量控制或进度把控，建设单位可初步判定其不履职。
- 处理建议：建设单位应先与监理单位沟通，要求其整改；若拒不改正，可依据合同条款追究其违约责任，如扣除监理费、解除合同等。
政府建设行政主管部门：
- 政府建设行政主管部门（如住房和城乡建设局）对建设工程质量和安全生产负有监管责任。若发现监理单位存在违法违规或未履行监理职责的行为，行政部门可判定其不履职。
- 处理建议：政府建设行政主管部门可采取警告、罚款、责令停业整顿、降低资质等级乃至吊销资质证书等行政处罚。
第三方评估机构：
- 为公正、客观地评价监理单位的工作，可引入具有专业评估能力的第三方机构进行评估。
- 处理建议：根据第三方评估机构的评估报告，建设单位或行业监管部门可对监理单位采取相应处理措施。
仲裁机构或人民法院：
- 当建设单位与监理单位就履职问题产生争议时，可提交仲裁机构仲裁或向人民法院提起民事诉讼。
- 处理建议：若裁定监理单位不履职，其需按裁决或判决承担法律责任，如赔偿经济损失等。
二、监理不履行职责的法律依据
监理单位在工程项目中的履职行为受到多部法律法规的严格监管，包括但不限于《中华人民共和国建筑法》、《建设工程质量管理条例》、《建设工程安全生产管理条例》及《工程监理企业资质管理规定》等。这些法律法规明确规定了监理单位的职责、权利与义务，以及未履行职责时可能面临的处罚措施，如罚款、停业整顿、降低资质等级或吊销资质证书等。
三、处理建议
加强合同管理：
- 确保监理合同条款详尽且具可操作性，明确监理单位的职责、权利与义务，为后续的判定与处理提供坚实基础。
强化日常监督：
- 建设单位应加强对监理单位日常工作的监督与管理，及时发现并纠正不履职行为。这可以通过定期检查、专项督查等方式实现。
建立应急机制：
- 针对监理单位可能出现的严重不履职行为，建设单位应建立应急处理机制，确保工程安全与进度不受影响。这可以包括制定应急预案、组建应急小组等措施。
利用法律武器：
- 在必要时，建设单位应勇于通过法律途径维护自身权益，追究监理单位的法律责任。这可以包括提交仲裁机构仲裁或向人民法院提起民事诉讼等方式。
综上所述，监理不履行职责是一个涉及多个主体与环节的复杂问题。为确保工程建设的顺利进行与质量的稳步提升，各相关方应依据法律法规、合同条款及实际情况，共同加强对监理单位的监督与管理，确保其切实履行监理职责。