结论：承包方在您的土地上建房是否违法，需根据土地性质、建房用途及是否办理相关审批手续等因素综合判断。若未经依法批准，擅自在承包地上建房，通常属于违法建筑行为。
一、土地性质与用途
承包地性质：
- 承包地一般用于农业生产，如种植作物、养殖畜禽等。这是承包地的基本性质和用途。
改变土地用途：
- 若承包方未经依法批准，将承包地用于建房等非农业建设，则改变了土地的原有用途。这种改变通常违反了相关法律法规，如《中华人民共和国土地管理法》中关于土地承包经营权的规定。
二、建房行为的合法性
审批手续：
- 根据《城乡规划法》等相关法律法规，在农用地上进行非农业建设，如建房，必须依法办理建设用地审批手续，并符合土地利用总体规划和城乡规划。
- 若承包方未办理相关审批手续，擅自在您的土地上建房，则属于违法建筑行为。
许可与默许：
- 即使承包方获得了某些部门的许可或默许，但如果未按照法定程序办理相关手续，仍然构成违建。因为合法建房必须遵循严格的审批流程，确保土地用途的合法性和规划的合理性。
三、可能的法律后果
拆除风险：
- 违建房屋可能面临被拆除的风险。根据相关法律法规，违法建筑应当被依法拆除，以恢复土地的原状和用途。
行政处罚：
- 违建行为还可能受到行政处罚，如罚款等。这是为了对违法者进行惩戒，并维护土地管理和城乡规划的秩序。
四、建议与措施
核实情况：
- 首先，您需要核实承包方是否办理了相关的审批手续，以及建房是否符合土地利用总体规划和城乡规划。这可以通过向相关部门查询或要求承包方提供相关证明文件来实现。
协商解决：
- 如果承包方未经批准擅自建房，您可以先尝试与承包方进行协商，要求其停止建房行为，并恢复土地原状。在协商过程中，您可以明确告知承包方其行为的违法性及可能面临的法律后果。
法律途径：
- 如果协商无果，您可以考虑通过法律途径来维护自己的权益。例如，您可以向相关部门举报承包方的违法建房行为，要求其依法进行查处；或者您可以向法院提起诉讼，要求承包方承担相应的法律责任。
在处理此类问题时，建议您保持冷静和理性，依法维护自己的权益。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。