结论：对方扣留货物要钱是否合法，需根据具体情况判断，一般而言，若没有合法依据，对方扣留货物要钱的行为是不合法的。以下从不同角度进行分析：
一、合同约定角度
合同中有明确约定：
- 如果货物买卖合同中明确约定了，在买方未支付货款或其他约定费用时，卖方有权扣留货物直至费用支付完毕，那么在这种情况下，对方扣留货物要钱的行为可能是合法的，但前提是该约定不违反法律法规的强制性规定和公序良俗。
- 法律依据：根据《中华人民共和国民法典》的相关规定，依法成立的合同，对当事人具有法律约束力。当事人应当按照约定履行自己的义务，不得擅自变更或者解除合同。
合同中无明确约定：
- 如果合同中没有明确约定扣留货物的条款，那么对方扣留货物要钱的行为就缺乏合同依据，可能构成违约或侵权。
- 法律后果：在此情况下，你可以要求对方立即返还货物，并有权要求对方赔偿因扣留货物给你造成的损失。如果对方拒绝返还，你可以通过法律途径维护自己的合法权益，如向法院提起诉讼或申请仲裁。
二、法律规定角度
留置权行使：
- 根据《中华人民共和国民法典》的规定，债权人留置的动产，应当与债权属于同一法律关系，但是企业之间留置的除外。如果对方主张留置权，需要证明其扣留的货物与所主张的债权属于同一法律关系，且符合留置权行使的其他条件。
- 例外情况：如果货物买卖合同中明确约定不得留置的，或者留置货物会违背公序良俗的，那么对方不得行使留置权。
非法扣留：
- 如果对方没有合法依据扣留货物，那么其行为可能构成非法扣留或侵占。在此情况下，你不仅可以要求对方返还货物，还可以要求对方承担因非法扣留给你造成的损失，包括但不限于货物价值、运输费用、仓储费用等。
- 法律救济：你可以向公安机关报案，要求对方承担刑事责任（如果构成犯罪的话），或者向法院提起民事诉讼，要求对方承担民事责任。
三、实际操作建议
审查合同：
- 首先，你需要仔细审查货物买卖合同，查看合同中是否有关于扣留货物的明确约定。如果有，你需要评估该约定的合法性和有效性。
与对方协商：
- 如果合同中没有明确约定或约定不明确，你可以尝试与对方进行协商，了解对方扣留货物的原因和诉求，并寻求双方都能接受的解决方案。
寻求法律帮助：
- 如果协商无果或对方态度强硬，你可以寻求法律帮助。作为专业律师，我可以为你提供法律咨询和法律服务，帮助你分析案情、制定诉讼策略或进行仲裁申请等。
总结：对方扣留货物要钱是否合法，需根据合同约定和法律规定进行综合判断。在没有合法依据的情况下，对方扣留货物要钱的行为是不合法的。如果你遇到此类问题，建议先审查合同、与对方协商，并寻求法律帮助以维护自己的合法权益。有问题可以直接向我咨询，我会为你提供专业的法律服务。