结论：在货物买卖合同纠纷中，若对方不付款，您直接将货装走是否违法，需根据具体情况判断，可能违法也可能不违法。以下从不同角度为您详细分析：
一、合同约定与履行情况
合同有明确约定：
- 如果货物买卖合同中明确约定了付款方式和时间，以及在对方不付款时您的权利（如留置货物、解除合同等），那么您应当按照合同约定来行使权利。
- 若合同中未约定您在对方不付款时有权直接装走货物，那么您擅自装走货物可能构成违约或侵权，具体取决于货物的所有权归属和合同的具体条款。
合同无明确约定或约定不明：
- 在没有明确合同约定的情况下，您擅自装走货物可能涉及侵犯对方财产权的问题。因为，在货物交付后，除非合同另有约定或法律另有规定，货物的所有权通常已经转移给买方。
- 此时，您若未经对方同意擅自装走货物，可能构成对对方财产权的侵犯，需要承担相应的法律责任。
二、货物所有权归属
货物所有权已转移：
- 如果货物已经交付给对方，且所有权已经转移，那么您擅自装走货物将构成对对方财产权的侵犯，对方有权要求您返还货物并赔偿损失。
货物所有权未转移：
- 如果货物尚未交付给对方，或者虽然交付但所有权尚未转移（如保留所有权买卖），那么您作为货物的所有权人，有权在对方不付款的情况下采取合理措施保护自己的权益，包括装走货物。但需注意，采取措施时不得违反法律、行政法规的强制性规定，不得损害对方的合法权益。
三、法律后果与风险防范
违法后果：
- 如果您擅自装走货物的行为被认定为违法或侵权，您可能需要承担返还货物、赔偿损失等民事责任。
- 在严重情况下，如涉及盗窃、抢夺等犯罪行为，您还可能面临刑事责任。
风险防范建议：
- 在签订货物买卖合同时，应明确约定付款方式、时间以及违约责任等条款，以便在对方不付款时有明确的法律依据来行使权利。
- 在对方不付款时，应首先通过协商、调解等合法途径解决纠纷。若协商无果，可以考虑通过法律途径（如诉讼、仲裁）来维护自己的权益。
- 在采取任何措施前，应咨询专业律师的意见，确保自己的行为合法合规。
进一步思考：在处理货物买卖合同纠纷时，除了考虑货物的所有权归属和合同约定外，还应关注交易习惯、行业惯例以及相关法律法规的规定。例如，在某些行业中，可能存在特定的交易规则或惯例，这些规则或惯例可能对货物的交付、付款以及纠纷解决等方面产生重要影响。因此，在处理具体纠纷时，应综合考虑各种因素，以制定合理的解决方案。
最后，如果您在货物买卖合同纠纷中遇到任何问题或需要进一步的法律帮助，请随时向我咨询。我将根据您的具体情况，为您提供专业、全面的法律建议。