以扣绩效为由不交付工作，这一行为是否违法，需分情况讨论：

1. 若公司扣绩效有合法依据且程序正当：

   • 合法依据：公司扣绩效应当基于明确的规章制度，这些规章制度应当经过民主程序制定（如职工代表大会或全体职工讨论），并且已经向劳动者公示或告知。规章制度中应明确绩效扣减的条件、标准和程序。
   • 程序正当：公司在扣减绩效时，应当遵循正当程序，如与劳动者进行沟通、说明扣减原因、提供申诉渠道等。
   • 结论：在此情况下，公司以扣绩效为由不交付工作（假设这里的“不交付工作”是指因绩效扣减而调整工作内容或工作量，且这种调整是合理的），并不构成违法。但需注意，公司调整工作内容或工作量应当合理，且不得违反劳动合同的约定。

2. 若公司扣绩效缺乏合法依据或程序不当：

   • 缺乏合法依据：如果公司扣绩效没有明确的规章制度支持，或者规章制度本身违法（如未经民主程序制定、未公示或告知劳动者等），则扣绩效行为可能被视为违法。
   • 程序不当：即使公司有规章制度支持扣绩效，但如果扣减过程中未遵循正当程序（如未与劳动者沟通、未说明扣减原因等），也可能构成违法。
   • 不交付工作的违法性：如果公司以违法的扣绩效为由不交付工作，或者不交付工作的行为本身违反了劳动合同的约定（如无故降低工作量、调整工作内容等），则这种行为可能构成违法。劳动者有权要求公司按照劳动合同的约定提供工作条件，并有权就公司的违法行为向劳动监察部门投诉或申请劳动仲裁。

法律建议：

• 劳动者：如果你认为公司以扣绩效为由不交付工作的行为违法，首先应当查看公司的规章制度，确认扣绩效是否有合法依据且程序正当。如果认为公司的行为违法，可以与公司进行沟通协商，要求公司纠正违法行为。如果协商无果，可以向劳动监察部门投诉或申请劳动仲裁，维护自己的合法权益。
• 公司：公司应当确保扣绩效的行为有合法依据且程序正当，避免因此引发劳动争议。在调整工作内容或工作量时，应当与劳动者进行充分沟通，确保调整行为合理且符合劳动合同的约定。

可能法律后果：

• 如果公司的行为被认定为违法，可能需要承担恢复劳动者工作条件、支付违法扣减的绩效工资、赔偿劳动者因此遭受的损失等法律责任。
• 劳动者如果因此遭受损失，有权要求公司进行赔偿，并可以通过法律途径维护自己的权益。