违法建筑并非在所有情况下都必须拆除，存在一些不能拆除的特殊情形。以下从不同角度为你详细分析：

一、符合特定历史背景和政策要求的违法建筑

1. 历史遗留问题：某些违法建筑是在特定历史时期，由于政策、规划等原因而建设的。例如，在早期城市规划不完善或政策宽松时期建设的房屋，虽然现在可能不符合新的规划要求，但考虑到其历史背景和形成原因，可能不会被强制拆除。这类建筑通常需要经过相关部门的认定，确认其属于历史遗留问题后，可能会采取补办手续、罚款等方式进行处理，而非直接拆除。

2. 政策调整影响：有时政策的变化会导致原本合法的建筑变为违法建筑。例如，某地区原本允许在特定区域内建设某种类型的建筑，但后来政策调整，该区域被划为禁止建设区。对于在此政策调整前已经建设的建筑，如果拆除会对业主造成重大损失，且该建筑不影响城市规划、公共安全等，相关部门可能会考虑不拆除，而是通过其他方式进行处理。

二、拆除可能对公共利益造成重大损害的违法建筑

1. 涉及公共设施：如果违法建筑与公共设施紧密相连，拆除可能会影响公共设施的正常运行或造成重大损失。例如，违法建筑是某变电站的附属设施，拆除可能会导致变电站无法正常工作，影响周边地区的电力供应。在这种情况下，相关部门可能会选择不拆除，而是通过整改、加固等方式确保公共设施的安全运行。

2. 影响社会稳定：某些违法建筑可能涉及大量居民的居住问题，如果强行拆除可能会导致社会不稳定因素。例如，一些城中村中的违法建筑是大量外来务工人员的住所，拆除这些建筑可能会导致他们无处可住，引发社会问题。在这种情况下，相关部门可能会考虑通过其他方式解决居住问题，如提供廉租房、安置房等，而非直接拆除违法建筑。

三、符合法定程序和条件的违法建筑

1. 已取得部分许可：如果违法建筑在建设过程中已经取得了部分许可，如土地使用证、规划许可证等，但因其他原因未完全取得合法手续，且该建筑符合城市规划、公共安全等要求，相关部门可能会考虑不拆除，而是要求业主补办剩余手续，使建筑合法化。

2. 符合整改条件：对于一些可以通过整改达到合法要求的违法建筑，相关部门可能会给予业主一定的整改期限，要求其在规定期限内完成整改。如果业主能够按照要求完成整改，使建筑符合相关法规和规划要求，那么该建筑可能不会被拆除。

四、其他特殊情形

1. 自然灾害等不可抗力因素：在自然灾害等不可抗力因素发生后，为了尽快恢复生产生活秩序，对于一些因灾害导致的违法建筑，相关部门可能会考虑不立即拆除，而是先进行临时修复或加固，待条件成熟后再进行处理。

2. 业主特殊困难：如果业主因特殊困难（如重大疾病、残疾等）无法承担拆除费用或无处可住，且该建筑不影响城市规划、公共安全等，相关部门可能会考虑给予一定的宽限期或提供其他帮助，而非直接拆除。

法律建议：

• 对于违法建筑的处理，相关部门会综合考虑多种因素，包括历史背景、政策要求、公共利益、法定程序等。因此，业主在面临违法建筑拆除问题时，应积极与相关部门沟通，了解具体情况和政策要求。
• 如果业主认为自己的建筑不应被拆除或存在特殊情况需要处理，可以寻求专业律师的帮助，通过法律途径维护自己的合法权益。

可能后果：

• 如果违法建筑确实需要拆除且业主不配合，相关部门可能会依法采取强制拆除措施，并可能对业主处以罚款等行政处罚。
• 如果业主能够积极配合整改或提供合理理由说明不应拆除，相关部门可能会考虑不拆除或给予宽限期处理。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。