针对林地内堆放建筑垃圾应归哪个部门处罚的问题，结论如下：

1. 林业主管部门：

   • 法律依据：根据《中华人民共和国森林法》的相关规定，林业主管部门负责森林资源的保护和管理，包括林地使用、林木采伐、森林防火等。虽然该法并未直接提及建筑垃圾堆放的问题，但林地作为森林资源的重要组成部分，其保护和管理职责自然涵盖了对林地内非法行为的监管。
   • 具体职责：林业主管部门在发现林地内堆放建筑垃圾时，有权进行调查取证，并根据相关法律法规对违法行为人进行处罚，如责令停止违法行为、限期恢复原状、罚款等。

2. 环境保护主管部门：

   • 法律依据：根据《中华人民共和国环境保护法》以及相关的地方性环保法规，环境保护主管部门负责环境污染的防治和监管。建筑垃圾的堆放可能对林地土壤、水源等造成污染，因此属于环保部门的监管范围。
   • 具体职责：环保部门在接到相关举报或发现林地内堆放建筑垃圾时，会进行现场勘查，评估污染程度，并根据环保法规对违法行为人进行处罚，如责令清理垃圾、罚款、责令停产整治等。

3. 城市管理或综合执法部门：

   • 实际情况：在一些地区，城市管理或综合执法部门也承担着对非法倾倒垃圾等行为的监管职责。这主要取决于当地的具体法规和政策安排。
   • 具体职责：如果当地法规授权城市管理或综合执法部门对林地内堆放建筑垃圾的行为进行处罚，那么这些部门在接到举报或发现违法行为时，也会进行相应的调查和处理。

法律建议与后续行动：

• 确定具体管辖部门：由于不同地区的法规和政策可能存在差异，因此建议首先咨询当地林业主管部门、环境保护主管部门或城市管理/综合执法部门，以确定具体的管辖部门和处罚依据。
• 积极配合调查：如果您的林地内堆放了建筑垃圾，且被相关部门发现或举报，建议积极配合调查，如实说明情况，并按照要求清理垃圾、恢复原状。
• 寻求法律帮助：如果您对处罚决定有异议或认为自己的权益受到侵害，可以寻求法律帮助，通过行政复议或行政诉讼等途径维护自己的合法权益。

可能法律后果：

• 如果被认定为违法行为，可能会面临罚款、责令清理垃圾、恢复原状等处罚。
• 如果违法行为情节严重，构成犯罪的，还可能依法追究刑事责任。

如有任何进一步的问题或需要更详细的法律建议，请直接向我咨询。