针对您签了三方协议但不想去的情况，这确实是一个需要谨慎处理的问题。以下是我为您提供的详细解答：

首先，我们要明确三方协议的法律性质。三方协议，即《全国普通高等学校毕业生就业协议书》，是明确毕业生、用人单位和学校三方在毕业生就业工作中的权利和义务的协议。它具有一定的法律效力，但并非劳动合同，而是毕业生与用人单位之间就业意向的初步约定。

接下来，我们分析您的情况：

1. 协议状态：您已经签字，单位也盖章了，但还没交给学校去盖章。这意味着协议在法律上尚未完全生效，因为学校作为鉴证方尚未参与确认。然而，这并不意味着您可以随意违约，因为单位可能已经基于您的签字和单位的盖章进行了相应的准备和安排。

2. 违约原因：您提到由于身体原因无法接受夜班工作，这是合理的违约原因。但您需要明确的是，即使原因合理，如果协议中有违约条款，您仍可能需要承担一定的法律责任。

3. 违约责任：

   • 协商解决：首先，我建议您与单位进行坦诚的沟通，说明您的情况和违约原因，尝试协商解决。您可以提出不支付违约金或支付部分违约金作为补偿，看单位是否能够接受。
   • 学校协助：如果与单位协商无果，您可以向学校就业管理部门求助。学校作为鉴证方，可能会提供一定的帮助或建议，协助您与单位进行沟通。
   • 法律途径：如果协商和学校协助都无法解决问题，且您认为单位的违约要求不合理，您可以考虑向劳动仲裁部门申诉。但请注意，这需要您准备充分的证据来支持您的主张。

4. 特殊情况：根据您提供的信息，如果三方协议中明确约定了违约金，并且您尚未到单位报到（即三方协议尚未因您报到而自行终止），那么您可能需要按照协议约定支付违约金。但如果您能够证明违约是由于不可抗力或单位原因导致的，您可能可以免除或减轻违约责任。

5. 后续影响：无论您是否支付违约金，违约行为都可能对您未来的就业产生一定影响。因此，在做出决定前，请务必权衡利弊，考虑清楚。

综上所述，我建议您首先与单位进行坦诚的沟通，尝试协商解决；如果协商无果，可以向学校就业管理部门求助；如果问题仍然无法解决，且您认为单位的违约要求不合理，可以考虑向劳动仲裁部门申诉。同时，请务必注意违约行为可能对您未来就业产生的影响。