在双方都有争议的土地上种植茶叶被对方拔了，此行为可能构成侵权或破坏财物，但具体责任的判定需依据土地权属及实际损失情况来确定。

一. 分析土地权属争议

1. 土地权属的重要性：首先，需要明确土地的所有权或使用权归属。根据《中华人民共和国土地管理法》的相关规定，土地的所有权和使用权应受到法律保护，任何单位和个人不得侵犯。
2. 权属争议的解决：若双方对土地权属存在争议，应通过协商、调解、仲裁或诉讼等方式来明确权属。在权属未明确之前，双方都应保持现状，避免采取可能激化矛盾的行为。

二. 分析拔茶叶的行为

1. 可能构成侵权：如果土地权属已经明确，且种植茶叶的一方拥有合法的土地使用权，那么对方擅自拔掉茶叶的行为就可能构成侵权。根据《中华人民共和国民法典》的相关规定，侵权人应承担相应的民事责任，包括赔偿损失等。
2. 破坏财物的法律责任：即使土地权属存在争议，但茶叶作为种植者的财产，其合法权益也应受到保护。如果对方故意或过失地破坏了茶叶，也可能需要承担相应的法律责任。

三. 处理建议

1. 明确权属：建议双方尽快通过合法途径明确土地权属，以避免类似的纠纷再次发生。
2. 协商赔偿：如果茶叶被拔造成了实际损失，双方可以协商赔偿事宜。赔偿金额应基于茶叶的市场价值、种植成本以及双方的过错程度等因素来确定。
3. 法律途径：如果协商无果，受损方可以考虑通过法律途径来维护自己的合法权益。例如，向法院提起诉讼，要求对方承担侵权责任或赔偿损失。

我建议，在处理此类纠纷时，双方应保持冷静和理性，通过合法途径来解决问题。同时，也要注意保护自己的合法权益，避免采取过激或违法的行为。如有进一步需要，您可以继续咨询我。