破坏高标准农田的管理责任主体涉及多个部门，具体管理职责需根据破坏行为性质和后果来判定，主要涉及农业农村部门、自然资源部门以及可能涉及的生态环境部门和公安机关。以下是详细分析：

1. 农业农村部门
   农业农村部门是高标准农田建设与管理的核心部门，负责制定农田建设规划、组织实施项目并监督使用情况。若破坏行为涉及擅自改变农田用途（如非农建设、挖塘养鱼等），或因管理不善导致农田质量下降，农业农村部门有权要求责任人限期整改，并可联合其他部门查处。例如，《高标准农田建设通则》明确要求农田必须用于农业生产，禁止破坏性使用。

2. 自然资源部门
   若破坏行为涉及非法占用耕地（如未经批准建房、采矿等），或违反土地利用总体规划，自然资源部门将依据《土地管理法》介入。此类行为可能触犯“非法占用农用地罪”，自然资源部门可责令退还土地、恢复原状，并处以罚款；构成犯罪的，将移送公安机关追究刑事责任。

3. 生态环境部门
   若破坏行为导致农田土壤污染、水土流失或生态功能丧失（如倾倒废弃物、过度使用化肥农药），生态环境部门将依据《环境保护法》《土壤污染防治法》等法规，要求责任人采取修复措施，并可能处以高额罚款。例如，污染农田超过地方标准的，责任人需承担土壤修复费用及生态损害赔偿。

4. 公安机关
   若破坏行为情节严重（如故意毁坏农田、暴力阻挠执法），公安机关将依据《刑法》介入。例如，故意毁坏高标准农田设施或耕地，造成损失达5000元以上的，可能构成“故意毁坏财物罪”；非法占用基本农田5亩以上或一般耕地10亩以上的，可能构成“非法占用农用地罪”，最高可处5年有期徒刑。

补充说明：

• 村民自治组织：若破坏行为发生在村集体土地上，村委会可通过村规民约进行初步制止，并上报上级部门。
  
• 举报与监督：任何单位或个人发现破坏高标准农田行为，均可向上述部门举报，相关部门需依法处理并反馈结果。
  

建议：若您遇到具体破坏行为，可先收集证据（如照片、视频、证人证言），明确破坏主体（个人/企业）和破坏方式（占用/污染/损毁），再向对应部门投诉。如需进一步协助，可直接向我咨询具体法律流程。