针对您提出的问题“三方就业协议签了以后不想去了”，这是一个涉及就业协议违约责任的问题，我会结合相关法律法规和实际情况，为您详细解答。

首先，我们需要明确三方就业协议的法律性质。三方就业协议，全称为《全国普通高等学校毕业生就业协议书》，是明确普通高等学校毕业生、用人单位、毕业生所在学校三方在毕业生就业工作中的权利和义务达成的书面协议。它本质上属于一般民事合同，不属于劳动合同，因此，毕业生和用人单位签订就业协议书并不意味着双方已经建立了劳动关系。

接下来，我们分析违约责任的问题。根据《中华人民共和国民法典》的相关规定，当事人应当按照约定全面履行自己的义务。如果一方不履行合同义务或者履行合同义务不符合约定的，应当承担继续履行、采取补救措施或者赔偿损失等违约责任。在三方就业协议中，如果毕业生单方解除协议，且协议中明确约定了违约条款，那么毕业生通常需要承担违约责任，包括支付违约金或赔偿损失。

针对您提到的具体情况，即已经签字、单位盖章但还没交给学校去盖章的三方就业协议，如果您因为身体原因（如无法接受夜班工作）而不想去这家单位了，这属于单方解除协议的情况。此时，您需要关注协议中是否明确约定了违约条款。如果约定了违约金，且该条款不违反法律、法规的禁止性、效力性规定，且是双方真实意愿下签订，那么该条款对双方当事人具有法律效力，您可能需要支付违约金。

然而，您也提到已经和这家单位人事沟通过了，对方表示“如果不去这家单位就要陪违约金”。在这种情况下，我建议您进一步与单位进行沟通协商，说明您的身体原因和实际情况，尝试争取减免违约金或达成其他和解方案。同时，您也可以向学校就业管理部门求助，寻求他们的指导和支持。

如果无法与单位协商达成一致，且您认为违约金过高或不合理，您可以考虑向劳动仲裁部门申诉。劳动仲裁部门会根据实际情况和法律规定，对违约责任进行裁决。但需要注意的是，申诉过程可能需要一定的时间和精力，且结果并不一定完全符合您的期望。

最后，我想强调的是，三方就业协议是双方协商后签订的，具有法律效力。因此，在签订协议前，您应该充分了解协议内容，包括违约条款等，并谨慎考虑自己的实际情况和未来规划。如果确实需要解除协议，应该尽早与单位沟通协商，并尽量达成和解方案，以减少不必要的纠纷和损失。