结论前置：对方合同违约时，您拿着对方物品不归还，这一行为是否违法需视具体情况而定，不能一概而论。

详细分析：

1. 若物品属于留置物且符合留置权行使条件：

   • 法律背景：根据《中华人民共和国民法典》的相关规定，留置权是指债权人按照合同约定占有债务人的动产，债务人不按照合同约定的期限履行债务的，债权人有权依照法律规定留置该财产，以该财产折价或者以拍卖、变卖该财产的价款优先受偿。
   • 具体分析：如果您因合同关系而合法占有对方的物品，且对方违约未履行合同义务，同时该物品与债权属于同一法律关系（如加工承揽合同中的加工物、运输合同中的货物等），那么您在符合留置权行使条件的情况下，可以留置该物品作为债权的担保。但需注意，留置权的行使需遵循法定程序，如通知债务人、给予合理的履行期限等。
   • 法律后果：若您正确行使留置权，则不构成违法，且有权在债务人不履行债务时，就留置物优先受偿。

2. 若物品不属于留置物或不符合留置权行使条件：

   • 法律背景：若您占有的对方物品不属于留置物，或者虽然属于留置物但不符合留置权行使的条件（如未通知债务人、未给予合理履行期限等），则您的占有行为可能构成无权占有。
   • 具体分析：在无权占有的情况下，您拿着对方物品不归还，可能侵犯了对方的财产权，对方有权要求您返还物品，并可能因此向您主张侵权责任。
   • 法律后果：若您构成无权占有，则需承担返还物品的责任，并可能因侵权行为而赔偿对方因此遭受的损失。

建议与提醒：

• 核实留置权行使条件：在对方违约的情况下，若您认为可以行使留置权，请务必核实是否符合留置权行使的法定条件，并遵循法定程序进行操作。
• 及时沟通协商：在对方违约后，建议您及时与对方进行沟通协商，寻求妥善解决纠纷的方式，避免因占有物品不归还而引发不必要的法律纠纷。
• 寻求法律帮助：若您对留置权的行使条件、程序或法律后果存在疑问，或者因占有对方物品不归还而面临法律纠纷，建议您及时向我咨询，以便获得专业的法律帮助。

进一步思考：在处理合同纠纷时，除了考虑留置权的行使外，还应关注合同的具体条款、违约责任的承担方式以及纠纷解决机制等。通过全面分析合同内容和纠纷情况，您可以更好地维护自己的合法权益。