结论：承包方私自将茶园变更成五荒地的行为是否违法，需根据具体情况判断，主要包括土地性质、变更程序以及是否损害集体或他人利益等因素。以下从不同角度进行详细分析：
土地性质与用途管制
- 根据《中华人民共和国土地管理法》及相关规定，土地用途受到严格管制，不得随意变更。茶园通常属于农用地范畴，而五荒地（荒山、荒沟、荒丘、荒滩、荒沙）则可能属于未利用地或特定类型的土地。
- 若茶园的土地性质为农用地，且未经法定程序变更土地用途，承包方私自将其变更为五荒地，则可能违反土地用途管制规定，构成违法行为。
变更程序合法性
- 土地用途的变更通常需要经过相关部门的审批和许可。这包括但不限于土地管理部门的批准、规划部门的规划调整等。
- 若承包方未按照法定程序申请并获得相关部门的批准，私自变更土地用途，则该行为可能因程序违法而被认定为无效或违法。
损害集体或他人利益
- 承包方私自变更土地用途，若损害了集体经济组织的利益或其他承包方的合法权益，如破坏了原有的农业生产条件、影响了周边土地的利用等，则可能构成侵权行为，需要承担相应的法律责任。
- 此外，若变更行为导致土地资源的浪费或破坏，还可能面临行政处罚或刑事责任。
特殊情况考虑
- 在某些特殊情况下，如因自然灾害导致茶园无法继续耕作，且经相关部门批准后，可能允许将土地用途变更为其他类型，包括五荒地的开发利用。但这种情况需要严格的审批程序和条件限制。
法律建议：
- 若您作为土地的所有者、使用者或相关利益方，发现承包方存在私自变更土地用途的行为，建议首先收集相关证据，如土地现状照片、变更前后的对比资料、相关审批文件的缺失情况等。
- 随后，您可以向当地土地管理部门或相关行政部门进行举报或投诉，要求相关部门进行调查处理。
- 若因该行为导致您的合法权益受到损害，您还可以考虑通过法律途径追究承包方的法律责任，包括要求其恢复土地原状、赔偿损失等。
可能法律后果：
- 承包方若因私自变更土地用途而违法，可能面临行政处罚，如罚款、责令恢复土地原状等。
- 若该行为构成犯罪，如非法占用农用地罪等，承包方还可能面临刑事责任追究。
如有任何进一步疑问或需要具体的法律帮助，请直接向我咨询。