未经别人允许往别人工地倾倒建筑垃圾是违法的。

首先，从法律角度来看，《城市建筑垃圾管理规定》第十三条明确规定，施工单位不得将建筑垃圾交给个人或者未经核准从事建筑垃圾运输的单位运输。这意味着，任何单位或个人在未经许可的情况下，不得擅自将建筑垃圾倾倒至他人工地或其他非指定地点。

其次，倾倒建筑垃圾不仅违反了法律法规，还会对环境造成严重影响。建筑垃圾中的有害物质可能污染土壤、水源，甚至影响空气质量，对周边居民的生活环境和健康构成威胁。

此外，从实际案例来看，也有相关单位因违规倾倒建筑垃圾而受到法律制裁。例如，某养护中心项目就因违规倾倒渣土被查处，并受到了警告和罚款的行政处罚。

因此，我强烈建议各施工单位和个人严格遵守相关法律法规，不要随意倾倒建筑垃圾。如有需要处理建筑垃圾，应联系经核准的建筑垃圾运输单位，并按照相关规定进行处置。这样既能保护环境，又能避免不必要的法律纠纷。如果你在这方面有任何疑问或需要进一步的法律帮助，请随时向我咨询。