结论：承租人不归还租赁物是否违法，需根据具体情况判断，主要包括租赁合同约定、租赁期限是否届满以及承租人是否构成违约等因素。以下从不同角度进行详细分析：
租赁合同有明确约定：
- 若租赁合同中明确规定了租赁期限届满或合同提前终止时，承租人应归还租赁物，且该约定不违反法律法规的强制性规定，那么承租人不归还租赁物则构成违约，甚至可能违法（如构成侵占等）。此时，出租人有权依据合同要求承租人归还租赁物，并可能要求承租人承担违约责任或赔偿损失。
租赁期限已届满：
- 无论租赁合同中是否有明确约定，租赁期限届满后，承租人通常应归还租赁物。这是租赁合同的基本义务之一。若承租人不归还，出租人有权要求承租人归还，并可能通过法律途径（如起诉）来维护自己的权益。
承租人构成违约：
- 若承租人在租赁期间内违反了租赁合同的约定（如未按时支付租金、擅自转租等），且这些违约行为导致出租人有权提前终止合同，那么在合同终止后，承租人同样应归还租赁物。若承租人不归还，则构成违约后的继续违约，出租人有权要求承租人归还并承担违约责任。
特殊情况下的处理：
- 在某些特殊情况下，如承租人因不可抗力或出租人同意而暂时无法归还租赁物，承租人应及时与出租人沟通并说明情况，寻求解决方案。在此情况下，承租人不归还租赁物可能不构成违法或违约，但需承担相应的证明责任和可能的后续责任。
法律建议：
- 对于出租人而言，若承租人不归还租赁物，应首先查看租赁合同中的相关约定，并依据合同要求承租人归还。若合同无约定或约定不明确，可与承租人协商解决；协商无果的，可通过法律途径（如起诉）来维护自己的权益。
- 对于承租人而言，应严格遵守租赁合同的约定，按时归还租赁物。若因特殊情况无法按时归还，应及时与出租人沟通并说明情况，寻求解决方案。避免因不归还租赁物而构成违法或违约，承担不必要的法律责任。
可能的法律后果：
- 若承租人不归还租赁物构成违法或违约，可能面临出租人的起诉要求归还租赁物、承担违约责任或赔偿损失等法律后果。在严重情况下，还可能面临刑事处罚（如构成侵占罪等）。因此，承租人应高度重视租赁物的归还问题，避免不必要的法律风险。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。