结论：别人往你们地里扔垃圾的行为，在多数情况下是违法的，可能涉及侵犯土地使用权和环境污染等法律问题。

详细分析：

1. 侵犯土地使用权：

   • 根据《中华人民共和国民法典》的相关规定，土地使用权人依法对国家所有的土地享有占有、使用和收益的权利，有权利用该土地建造建筑物、构筑物及其附属设施。别人往你们地里扔垃圾，显然干扰了你们对土地的正常使用，侵犯了你们的土地使用权。
   • 在这种情况下，你们有权要求扔垃圾的人停止侵害、排除妨碍，并可能要求赔偿因此造成的损失。

2. 环境污染问题：

   • 扔垃圾行为还可能构成环境污染。根据《中华人民共和国环境保护法》等相关法律法规，任何单位和个人都有保护环境的义务，不得随意倾倒、抛撒或者堆放生活垃圾等废弃物。
   • 如果扔的垃圾对土壤、水源等造成了污染，扔垃圾的人还可能面临环境行政处罚，甚至承担刑事责任（在严重污染环境的情况下）。

3. 具体法律后果：

   • 对于侵犯土地使用权的行为，你们可以通过民事诉讼途径要求扔垃圾的人承担民事责任，包括停止侵害、恢复原状、赔偿损失等。
   • 对于环境污染行为，你们可以向当地环保部门举报，由环保部门进行调查处理。如果构成犯罪，环保部门或公安机关将依法追究扔垃圾人的刑事责任。

4. 建议行动：

   • 首先，尝试与扔垃圾的人进行沟通，要求其停止侵害并清理垃圾。
   • 如果沟通无果，可以收集相关证据（如照片、视频、证人证言等），向当地村委会、乡镇政府或环保部门反映情况。
   • 必要时，可以寻求法律援助或直接向人民法院提起诉讼，维护自己的合法权益。

额外提醒：

• 在处理此类问题时，务必保持冷静和理性，避免采取过激行为导致矛盾升级。
• 如果可能的话，尽量在事发时及时取证，以便后续维权时提供有力支持。

如有任何进一步的问题或需要具体的法律帮助，请随时向我咨询。