结论：客户以“货做坏了”为由不给加工费，是否违法需分情况讨论，主要取决于货物损坏的原因及双方合同约定。以下从不同角度进行分析：
一、若货物损坏系因加工方（您客户）原因导致
违约责任：
- 根据《中华人民共和国民法典》第五百七十七条：“当事人一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。”
- 若货物损坏确实因加工方操作不当、技术问题或疏忽大意等导致，加工方构成违约，需承担修复、重作、减少报酬、赔偿损失等违约责任。此时，客户以“货做坏了”为由拒付加工费，虽表述可能略显直接，但实质上是在主张违约责任，若损坏程度严重且无法修复，客户有权要求减少或免除加工费支付义务，甚至要求赔偿损失。
举证责任：
- 客户需承担举证责任，证明货物损坏系加工方原因导致。这通常需要提供货物损坏的照片、视频、第三方鉴定报告等证据。
- 若客户无法提供充分证据，而加工方能证明货物损坏非自身原因导致（如原材料问题、客户指定工艺不合理等），则客户拒付加工费可能构成违约。
二、若货物损坏非因加工方原因导致
合同约定：
- 双方合同中若明确约定了货物损坏的责任归属（如“原材料问题导致的损坏由客户承担”或“客户指定工艺导致的损坏由客户自行负责”等），则按合同约定处理。
- 若合同未明确约定，则需根据《民法典》相关规定及行业惯例判断。
免责事由：
- 若货物损坏系因不可抗力（如自然灾害、战争等）、客户提供的原材料质量问题、客户指定工艺不合理等非加工方原因导致，加工方有权免除或减轻责任。
- 此时，客户以“货做坏了”为由拒付加工费，缺乏法律依据，加工方有权要求客户按合同约定支付加工费。
三、建议行动
沟通协商：
- 建议加工方首先与客户进行沟通协商，了解客户拒付加工费的具体原因及证据。
- 若客户能提供充分证据证明货物损坏系加工方原因导致，加工方应积极承担责任，与客户协商解决方案（如修复、重作、减少报酬等）。
- 若客户无法提供充分证据，或货物损坏非加工方原因导致，加工方应明确告知客户其拒付加工费的行为缺乏法律依据，并要求客户按合同约定支付加工费。
法律途径：
- 若沟通协商无果，加工方有权向法院提起诉讼或申请仲裁，要求客户支付加工费及可能产生的违约金、利息等。
- 在诉讼或仲裁过程中，加工方需提供充分证据证明其已按合同约定完成加工义务，且货物损坏非其原因导致。
总结：客户以“货做坏了”为由不给加工费是否违法，需根据货物损坏的原因及双方合同约定判断。若您或您的客户遇到此类问题，建议直接向我咨询，以便根据具体情况提供更详细的法律建议。