结论：未经允许直接处理掉邻居搭在你墙上的棚，可能构成违法行为。具体是否违法及法律后果，需根据棚的搭建情况、你的处理方式以及是否造成损害等因素综合判断。

分析说明：

1. 棚的搭建合法性：

   • 如果邻居搭建的棚未经相关部门批准，属于违法建筑，那么从行政管理的角度，相关部门有权进行查处和拆除。但这并不意味着你可以自行拆除，因为拆除违法建筑需要遵循法定程序，由相关部门执行。
   • 如果棚的搭建是合法的，比如已经取得了相关部门的批准，那么邻居就享有对该棚的合法使用权。此时，你未经允许拆除或损坏该棚，就可能构成侵权行为。

2. 你的处理方式：

   • 如果你未经邻居同意，擅自拆除或损坏其搭建的棚，无论棚是否合法，你的行为都可能构成对邻居财产权的侵犯。根据《民法典》的相关规定，侵害他人财产的，应当承担赔偿责任。
   • 如果你认为邻居的棚影响了你的正常生活或存在安全隐患，你可以先与邻居协商解决，或者向相关部门（如城管、物业等）投诉，由相关部门进行调解或处理。

3. 可能造成的损害：

   • 如果你在拆除棚的过程中造成了邻居财产的损失，或者对邻居的人身安全造成了威胁，那么你除了需要承担民事赔偿责任外，还可能面临行政处罚或刑事责任。

法律建议：

• 协商解决：首先尝试与邻居进行友好协商，说明你的困扰和担忧，寻求双方都能接受的解决方案。
• 投诉举报：如果协商无果，你可以向相关部门（如城管、物业等）投诉举报邻居的违法搭建行为，由相关部门进行查处。
• 法律途径：如果邻居的搭建行为确实侵犯了你的合法权益，且协商和投诉均无法解决问题，你可以考虑通过法律途径维护自己的权益，比如提起民事诉讼要求邻居停止侵害、排除妨碍或赔偿损失。

行动建议：

• 在采取任何行动之前，先收集相关证据，比如照片、视频等，以证明邻居的搭建行为以及你因此受到的影响。
• 在与邻居协商或向相关部门投诉时，保持冷静和理性，避免情绪化的行为导致矛盾升级。
• 如果需要法律帮助，可以直接向我咨询，我会根据你的具体情况提供专业的法律意见和帮助。