耕地上的杨树被人毁坏，一般属于林业部门或公安机关管理，具体取决于毁坏行为的性质和后果。以下从不同角度进行分析：

一、若毁坏行为构成林业行政违法

如果毁坏耕地上的杨树，但尚未达到刑事犯罪的程度，即毁坏的树木数量、价值等未达到刑事立案标准，那么该行为可能构成林业行政违法。根据《中华人民共和国森林法》的相关规定，林业主管部门（如林业局）有权对这类违法行为进行查处。林业主管部门会依据法律规定，对毁坏树木的行为人进行行政处罚，如罚款、责令补种树木等。

二、若毁坏行为构成刑事犯罪

如果毁坏耕地上的杨树，且达到了一定的数量或价值标准，或者毁坏行为具有其他严重情节，如故意毁坏、多次毁坏等，那么该行为可能构成刑事犯罪，如故意毁坏财物罪。在这种情况下，公安机关将介入调查，并依据《中华人民共和国刑法》的相关规定，对犯罪嫌疑人进行刑事立案侦查。如果证据确凿，犯罪嫌疑人将面临刑事处罚，如有期徒刑、拘役或罚金等。

三、特殊情况下的管理归属

1. 耕地保护角度：如果毁坏杨树的行为同时涉及非法占用耕地或改变耕地用途，那么该行为还可能违反《中华人民共和国土地管理法》的相关规定。此时，自然资源主管部门（如国土资源局）也可能介入调查，并依据法律规定进行处罚。
2. 环保角度：如果毁坏杨树的行为对生态环境造成了严重破坏，如导致水土流失、生物多样性减少等，那么该行为还可能违反《中华人民共和国环境保护法》的相关规定。此时，生态环境主管部门（如环保局）也可能根据具体情况进行调查和处理。

法律建议

1. 及时报案：如果发现耕地上的杨树被人毁坏，应立即向当地林业主管部门或公安机关报案，以便及时查处违法行为。
2. 保留证据：在报案前，应尽可能收集并保留相关证据，如现场照片、视频、证人证言等，以便为后续的调查和处理提供有力支持。
3. 咨询专业律师：如果涉及复杂的法律问题或纠纷，建议咨询专业律师，以便更好地维护自身合法权益。

若您在耕地保护、林业行政违法或刑事犯罪等方面有任何疑问或需要进一步的法律帮助，请直接向我咨询。