不按四邻尺寸盖房是否违法，需结合具体情况判断，不能一概而论。以下从不同角度进行分析：
一、合法情形
符合规划与审批要求：
- 如果您的建房行为完全符合当地城乡规划、土地利用规划，并且已经依法取得了建设用地规划许可证、建设工程规划许可证等审批文件，那么即使不按四邻尺寸盖房，也是合法的。因为规划审批文件已经对您的建房位置、面积、高度等进行了明确规定，您只需按照审批要求进行建设即可。
四邻无异议且不影响相邻权：
- 在某些情况下，即使您的建房行为与四邻的尺寸不完全一致，但如果四邻对此表示无异议，且您的建房行为没有侵犯到他们的相邻权（如通风、采光、排水等），那么这种建房行为也是合法的。相邻权是相邻不动产的所有人或使用人在行使所有权或使用权时，因相互间依法应当给予方便或接受限制而发生的权利义务关系。只要您的建房行为没有违反这一原则，就不会构成违法。
二、违法情形
违反规划与审批要求：
- 如果您的建房行为没有依法取得相关审批文件，或者虽然取得了审批文件但未按照审批要求进行建设（如擅自改变建房位置、面积、高度等），那么这种建房行为就是违法的。因为规划审批文件是建房行为的法律依据，违反审批要求就意味着违反了法律法规的规定。
侵犯相邻权：
- 如果您的建房行为侵犯了四邻的相邻权，如遮挡了他们的采光、通风，或者影响了他们的排水等，那么这种建房行为也是违法的。因为相邻权是受到法律保护的，任何侵犯相邻权的行为都可能面临法律责任。在这种情况下，四邻有权要求您停止侵害、排除妨碍或者赔偿损失等。
三、法律后果与建议
- 法律后果：如果您的建房行为被认定为违法，那么您可能面临行政处罚（如罚款、限期拆除等）甚至刑事责任（如构成非法占用农用地罪等）。同时，您还可能面临与四邻之间的民事纠纷和赔偿问题。
- 建议：在盖房前，务必了解并遵守当地的城乡规划、土地利用规划以及相关法律法规的规定。同时，与四邻进行充分沟通，确保您的建房行为不会侵犯到他们的相邻权。如果遇到纠纷或疑问，建议及时咨询专业律师或相关部门以获取更具体的法律意见和帮助。
总之，不按四邻尺寸盖房是否违法取决于多种因素，包括是否符合规划与审批要求、是否侵犯相邻权等。因此，在盖房前务必进行充分的了解和沟通，以确保您的建房行为合法合规。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。