结论：是否需要赔偿损失，取决于多个因素，包括违建的认定、推倒行为的合法性以及损失的具体情况等。以下从不同角度进行分析：

1. 违建的认定与处理：

   • 如果房屋确实被认定为违建，那么根据相关法律法规，违建是不受法律保护的。这意味着，从法律层面讲，违建的所有人可能无法主张对违建部分的完全权益。
   • 然而，即使房屋是违建，推倒行为也必须合法。如果邻居未经合法程序（如向相关部门申请强制执行等）就擅自推倒，那么这种行为可能构成侵权。

2. 推倒行为的合法性：

   • 如果邻居认为房屋是违建并希望拆除，应当通过合法途径向相关部门举报或申请强制执行，而不是自行采取行动。
   • 自行推倒违建可能涉及故意毁坏财物等违法行为，违建所有人有权要求邻居赔偿因此造成的损失（如果损失是合法财产的话，但违建部分本身可能不被视为合法财产）。不过，在实际操作中，由于违建的特殊性，赔偿的认定和计算可能会比较复杂。

3. 损失的具体情况：

   • 如果推倒行为导致了合法财产（如违建内的家具、设备等）的损失，那么违建所有人有权要求邻居赔偿这些损失。
   • 如果推倒行为仅针对违建部分，且没有造成其他合法财产的损失，那么从法律层面讲，违建所有人可能难以主张赔偿。但考虑到实际生活中的复杂性和人情因素，双方可以通过协商来寻求一个合理的解决方案。

4. 法律建议：

   • 对于违建所有人来说，如果认为邻居的推倒行为侵犯了自己的权益，可以收集相关证据（如照片、视频、证人证言等）并向当地公安机关报案或向法院提起诉讼。
   • 对于邻居来说，如果认为房屋是违建并希望拆除，应当通过合法途径向相关部门申请处理，而不是自行采取行动以避免法律纠纷。

可能后果：

• 如果邻居的推倒行为被认定为违法，那么可能需要承担民事赔偿责任，甚至可能面临行政处罚或刑事责任（如故意毁坏财物罪等）。
• 如果违建所有人通过法律途径主张权益并获得支持，那么邻居可能需要赔偿因此造成的损失。但具体赔偿金额和范围需要根据实际情况和法律规定来确定。

进一步思考：

• 在处理此类纠纷时，双方应当保持冷静和理性，通过协商或法律途径来解决问题，而不是采取过激行为导致矛盾升级。
• 对于违建问题，相关部门也应当加强监管和执法力度，从源头上减少此类纠纷的发生。

如有任何进一步的问题或需要更详细的法律建议，请直接向我咨询。