结论：耕地几年不种，村干部并不能直接收回，但存在特定情况下土地可能被收回或调整的风险。以下是对此问题的详细分析：
一、耕地承包经营权的基本原则
根据《中华人民共和国农村土地承包法》的相关规定，农村土地承包经营权受法律保护，承包方依法享有承包地使用、收益和土地承包经营权流转的权利，有权自主组织生产经营和处置产品。这意味着，承包方对其承包的耕地拥有长期的使用权，村干部不能仅因耕地未耕种就随意收回。
二、耕地撂荒的法律后果
虽然法律没有直接规定耕地撂荒多少年村干部可以收回，但《农村土地承包法》也明确了承包方有维持土地的农业用途，不得用于非农建设，以及依法保护和合理利用土地，不得给土地造成永久性损害等义务。如果承包方长期撂荒耕地，导致土地资源浪费或土地质量下降，这可能构成对承包合同的违约。然而，违约并不直接导致土地被收回，而是可能引发合同解除、赔偿损失等法律后果。
三、土地被收回或调整的特定情况
承包方自愿交回：如果承包方因个人原因（如迁出、转行等）自愿交回承包地，那么村干部可以依法收回土地。
承包方丧失承包资格：如承包方全家迁入设区的市，转为非农业户口，或者承包方死亡且无其他家庭成员继续承包等情况下，村干部可以依法收回或调整土地。
因自然灾害严重毁损等特殊情形：在因自然灾害严重毁损等特殊情形下，村集体可能会根据实际情况对土地进行调整或收回，但这需要遵循严格的法律程序和民主议定原则。
长期撂荒且拒不整改：虽然法律没有明确规定撂荒多少年可以收回土地，但如果承包方长期撂荒耕地，且经村集体多次劝导仍拒不整改，村集体可能会通过法律途径（如起诉解除合同）来解决问题。在这种情况下，如果法院判决解除合同，村干部就可以依法收回土地。
四、建议与措施
了解当地政策：不同地区对于耕地撂荒的处理政策可能有所不同，建议承包方了解当地的具体政策规定。
积极整改：如果承包方因故暂时无法耕种耕地，应积极与村集体沟通，说明情况并寻求解决方案，如流转土地、委托他人代耕等。
依法维权：如果村干部未经合法程序擅自收回耕地，承包方可以依法向相关部门投诉或提起诉讼，维护自己的合法权益。
最后，耕地几年不种村干部并不能直接收回，但承包方应遵守相关法律法规和合同约定，合理利用土地资源。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。