核心结论：未经允许拆别人墙的行为可能涉及民事侵权、行政违法甚至刑事犯罪，其认定条件和程序需结合具体法律条款和实际情况综合判断。以下从民事、行政、刑事三个角度详细说明认定条件及程序。

1. 民事侵权角度

认定条件：

• 行为要件：未经权利人同意，擅自拆除他人墙体，侵犯他人所有权或使用权。
• 损害结果：墙体被拆除导致权利人财产损失（如修复费用、房屋价值贬损等）。
• 因果关系：拆除行为与损害结果之间存在直接因果关系。
• 主观过错：行为人存在故意或过失（如明知是他人墙体仍拆除，或因疏忽未确认权属）。

程序：

1. 权利人举证：需提供证据证明墙体权属（如房产证、建房审批文件等）及拆除行为的存在（如现场照片、视频、证人证言等）。
2. 损失评估：通过专业机构评估修复费用或房屋价值贬损金额。
3. 协商或诉讼：权利人可先与行为人协商赔偿；协商不成，可向法院提起民事诉讼，要求停止侵害、恢复原状或赔偿损失。

2. 行政违法角度

认定条件：

• 行为要件：违反《城乡规划法》《土地管理法》等法规，擅自拆除他人墙体（如未取得规划许可或超出许可范围）。
• 损害公共利益：拆除行为影响城市规划、邻里安全或公共秩序（如拆除承重墙危及整栋楼安全）。
• 主观故意：行为人明知行为违法仍实施。

程序：

1. 行政机关调查：城管、规划等部门接到举报或发现违法行为后，会立案调查，收集证据（如现场勘验、询问笔录等）。
2. 行政处罚：若认定违法，可作出责令停止违法行为、限期改正、罚款（如按建筑面积处以每平方米一定金额罚款）等处罚。
3. 强制执行：若行为人拒不履行处罚决定，行政机关可申请法院强制执行。

3. 刑事犯罪角度

认定条件（以故意毁坏财物罪为例）：

• 行为要件：故意拆除他人墙体，且数额较大（如造成损失5000元以上）或情节严重（如多次毁坏、纠集多人毁坏等）。
• 主观故意：行为人明知拆除行为会损坏他人财物，仍希望或放任结果发生。

程序：

1. 刑事报案：权利人可向公安机关报案，公安机关立案后展开侦查（如调取监控、鉴定损失等）。
2. 刑事拘留/逮捕：若证据充分，可对犯罪嫌疑人采取强制措施。
3. 审查起诉/审判：案件移送检察院审查起诉，法院审理后作出判决（如有期徒刑、拘役或罚金）。

补充说明

• 权属争议处理：若墙体权属存在争议（如相邻权纠纷），需先通过行政确权或民事诉讼明确权属，再追究拆除责任。
• 特殊情形：若拆除行为系政府强制执行（如拆迁），需严格依据《行政强制法》程序进行，否则可能构成违法强拆。

建议：若您涉及此类纠纷，建议立即固定证据（如拍照、录像、保存沟通记录），并根据具体情况选择协商、行政投诉或诉讼途径解决。如有进一步疑问，可直接向我咨询具体法律问题。