结论：茶园旁边建鱼塘是否可以要求别人赔钱，这取决于鱼塘的建设和使用是否对茶园造成了实际的损害或影响，以及这种损害或影响是否符合法律规定的侵权情形。以下从不同角度进行分析：
一、从侵权责任的角度分析
侵权构成要件：
- 行为：鱼塘的建设和使用行为。
- 损害结果：茶园因鱼塘的建设和使用而遭受的实际损害，如土壤污染、水源污染、茶树生长受影响等。
- 因果关系：鱼塘的建设和使用行为与茶园遭受的损害之间存在直接的因果关系。
- 过错：鱼塘的建设者或使用者是否存在过错，如未采取必要的环保措施、未遵守相关法律法规等。
法律责任：
- 如果鱼塘的建设和使用行为符合上述侵权构成要件，那么茶园的所有者或管理者有权要求鱼塘的建设者或使用者承担侵权责任，包括赔偿损失、恢复原状等。
二、从相邻关系的角度分析
相邻关系原则：
- 相邻各方在行使权利时，应相互尊重、互谅互让，不得损害他方的合法权益。
- 如果鱼塘的建设和使用行为对茶园造成了不合理的妨碍或损害，那么这种行为可能违反了相邻关系的原则。
法律后果：
- 在这种情况下，茶园的所有者或管理者可以要求鱼塘的建设者或使用者停止侵害、排除妨碍、赔偿损失等。
三、从具体情形分析
如果鱼塘的建设和使用导致茶园土壤或水源污染：
- 这可能构成环境污染侵权，茶园的所有者或管理者可以依据相关法律法规要求鱼塘的建设者或使用者承担环境污染侵权责任。
如果鱼塘的建设和使用导致茶园茶树生长受影响：
- 这可能构成一般的财产损害侵权，茶园的所有者或管理者可以要求鱼塘的建设者或使用者赔偿因茶树生长受影响而造成的损失。
如果鱼塘的建设和使用并未对茶园造成实际损害：
- 那么茶园的所有者或管理者可能无法直接要求鱼塘的建设者或使用者赔钱。但如果在建设或使用过程中存在违反法律法规或行政规章的行为（如未取得相关许可、未遵守环保标准等），茶园的所有者或管理者可以向相关部门举报，由相关部门依法处理。
建议：
- 如果您认为茶园因鱼塘的建设和使用而遭受了损害，建议首先收集相关证据，如照片、视频、检测报告等，以证明损害的存在和因果关系。
- 然后，您可以尝试与鱼塘的建设者或使用者进行协商，寻求和解或赔偿。
- 如果协商无果，您可以考虑向相关部门投诉或提起诉讼，以维护自己的合法权益。
在处理此类问题时，请务必保持冷静和理性，依法维权。如果您有任何疑问或需要进一步的法律帮助，请直接向我咨询。