双方互拿差东西不归还，这一行为是否违法，需根据具体情况来判断。以下从不同角度进行分析：

1. 物品性质与价值：

   • 如果所拿物品属于对方所有，且具有一定价值（如贵重物品、有特殊意义的物品等），不归还可能构成侵占或盗窃行为，具体取决于物品的获取方式。若物品是通过非法手段（如偷窃、抢夺）获取，则显然违法；若物品是误拿或暂时借用后未归还，且对方要求归还而拒不归还，则可能构成侵占。
   • 如果所拿物品价值极低，如一支笔、一张纸等，通常不构成法律上的违法行为，但可能涉及道德层面的问题。

2. 行为意图与后果：

   • 如果双方互拿物品是出于玩笑或误会，且事后能够协商解决，及时归还物品，则通常不会引发法律问题。
   • 如果一方或双方故意不归还物品，且物品对对方有重要意义或价值，导致对方遭受损失，那么不归还方可能面临法律责任，如赔偿损失、返还物品等。

3. 法律条款适用：

   • 根据《中华人民共和国民法典》的相关规定，侵占他人财物的，应当返还财物，并可能承担赔偿责任。如果情节严重，如数额较大或拒不归还，还可能构成犯罪，如侵占罪。
   • 如果物品是通过盗窃、抢夺等非法手段获取，则直接适用《中华人民共和国刑法》中关于盗窃罪、抢夺罪的规定，将面临刑事处罚。

建议：

• 在遇到此类情况时，首先尝试与对方沟通协商，明确物品的所有权和归还意愿。
• 如果沟通无果，且物品对自身有重要意义或价值，可以考虑通过法律途径解决，如向法院提起诉讼要求返还物品或赔偿损失。
• 在日常生活中，应尊重他人的财产权，避免随意拿取或占用他人财物，以免引发不必要的法律纠纷。

后续行动：

• 如果您或对方因此事产生了法律纠纷，且无法自行解决，可以直接向我咨询，我将根据具体情况为您提供专业的法律建议和帮助。