货主不给运费，你不给回单是否违法，需视具体情况而定。以下是详细分析：

1. 合同约定的角度：

   • 如果双方签订的货物运输合同中明确规定了运费支付与回单交付的先后顺序或条件，那么应严格按照合同约定执行。
   • 若合同中未明确规定或约定不明确，则需要根据《中华人民共和国民法典》中关于合同履行的相关规定来判断。在这种情况下，货主不给运费，你作为承运人可以选择行使留置权，即暂时扣留货物或回单，以促使货主履行支付运费的义务。但扣留回单是否构成违约，需看合同中有无相关条款约定及具体约定内容。

2. 留置权的行使：

   • 根据《中华人民共和国民法典》的规定，托运人或者收货人不支付运费、保管费以及其他运输费用的，承运人对相应的运输货物享有留置权，但当事人另有约定的除外。
   • 因此，在货主不给运费的情况下，你作为承运人有权选择扣留货物或回单作为担保，直至货主支付运费。但这一行为需符合法律程序，且不得损害货主的合法权益。

3. 法律后果与建议：

   • 如果货主仍不支付运费，你可以通过法律途径追究其违约责任，包括但不限于提起诉讼或申请仲裁。
   • 在行使留置权或采取法律措施前，建议你先与货主进行协商，寻求和解或达成新的协议。
   • 同时，你也应确保自己的行为符合法律法规的要求，避免构成不当行使权利或侵权行为。

综上所述，货主不给运费时，你不给回单是否违法取决于双方合同的约定及具体法律程序的遵循。在采取任何行动前，建议你先咨询专业律师（即我）以获取更具体的法律建议和指导。当然，如果你有任何其他问题或需要进一步的法律咨询，请直接向我提问。