劳务派遣到新单位，劳动者不可以直接拒绝工作。下面我对此进行详细分析：

一. 劳务派遣的性质与劳动者的义务

1. 劳务派遣的定义：劳务派遣是一种特殊的用工方式，由劳务派遣单位与被派遣劳动者订立劳动合同，再将劳动者派遣到用工单位，由用工单位实际使用劳动者的劳动力。
2. 劳动者的义务：根据《劳动合同法》的相关规定，劳动者应当按照劳动合同的约定，忠实履行自己的劳动义务，包括接受劳务派遣单位的派遣，到指定的用工单位提供劳动。

二. 拒绝工作的法律后果

1. 违反劳动合同：如果劳动者拒绝到被派遣的新单位工作，可能构成对劳动合同的违反，劳务派遣单位有权依据劳动合同和法律规定，对劳动者采取相应的处理措施，如解除劳动合同、要求赔偿损失等。
2. 影响职业声誉：拒绝工作还可能对劳动者的职业声誉造成不良影响，影响未来在劳务派遣市场和就业市场的竞争力。

三. 应对建议

1. 沟通协商：如果劳动者对被派遣到新单位有异议，应当及时与劳务派遣单位进行沟通协商，寻求合理的解决方案。
2. 遵守合同约定：在未经与劳务派遣单位协商一致的情况下，劳动者应当遵守劳动合同的约定，按时到被派遣的新单位报到并提供劳动。

我的观点：劳务派遣到新单位后，劳动者应当忠实履行自己的劳动义务，不得直接拒绝工作。如有异议，应通过沟通协商的方式解决。如有进一步需要，您可以继续咨询我。