结论：您不能直接拆掉别人侵占的违章建筑，这一行为可能涉及违法，并可能引发一系列法律后果。以下是从不同角度进行的详细分析：
一、违章建筑的法律性质
违章建筑，通常指的是未经规划、建设等部门批准，擅自搭建的建筑物或构筑物。这类建筑在法律上不被认可，不享有合法的产权。然而，这并不意味着任何人都有权随意拆除或破坏违章建筑。
二、拆除违章建筑的合法途径
行政机关依法拆除：
- 根据相关法律法规，对于违章建筑，行政机关（如城市管理综合执法部门）有权依法进行拆除。这是拆除违章建筑的合法途径。
- 如果您认为某建筑是违章建筑且被他人侵占，您应向相关行政机关报告，由他们依法处理。
通过法律程序解决：
- 如果您认为自己的权益受到侵害，可以通过法律途径（如提起民事诉讼）来维护自己的权益。
- 在诉讼过程中，您可以要求法院确认建筑的违章性质，并请求法院判决侵占者返还建筑或赔偿损失。
三、直接拆除违章建筑的法律风险
可能构成违法行为：
- 如果您未经许可直接拆除违章建筑，这一行为可能构成故意毁坏财物等违法行为。
- 根据《中华人民共和国刑法》的相关规定，故意毁坏公私财物，数额较大或者有其他严重情节的，可能面临刑事处罚。
可能引发民事纠纷：
- 直接拆除违章建筑还可能引发与侵占者之间的民事纠纷，如赔偿纠纷等。
- 这将增加您的法律风险和成本，不利于问题的解决。
四、建议与措施
收集证据：
- 在采取任何行动之前，您应收集相关证据，如照片、视频、证人证言等，以证明建筑的违章性质和侵占行为。
咨询专业律师：
- 在处理此类复杂问题时，建议您咨询专业律师的意见。律师可以根据您的具体情况提供法律建议，并帮助您制定合适的解决方案。（当然，作为专业律师，我随时准备为您提供法律咨询和帮助。）
依法维权：
- 通过合法途径维护自己的权益是最稳妥的方式。您应避免采取过激行为，以免引发不必要的法律风险和纠纷。
总结与进一步思考：面对别人侵占您的违章建筑的情况，您不能直接拆除该建筑。相反，您应通过合法途径（如向行政机关报告或提起民事诉讼）来维护自己的权益。在处理此类问题时，请务必保持冷静和理性，依法行事。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。