结论：与单位签了合同不想干了，是否需要交违约金，主要取决于合同中的具体约定以及离职的具体情况。以下分情况详细说明：
一、无需支付违约金的情况
正常离职且无特殊约定：
- 根据《中华人民共和国劳动合同法》的相关规定，劳动者提前三十日以书面形式通知用人单位（试用期内提前三日通知），可以解除劳动合同，且无需支付任何赔偿金或违约金。这是法律赋予劳动者的辞职权，旨在保障劳动者的就业选择自由。
用人单位存在过错：
- 若用人单位存在未按照劳动合同约定提供劳动保护或劳动条件、未及时足额支付劳动报酬、未依法为劳动者缴纳社会保险费等违法行为，劳动者有权解除劳动合同，并可以要求用人单位支付经济补偿金，而非违约金。
二、需要支付违约金的情况
违反服务期约定：
- 如果用人单位为劳动者提供了专项培训费用，并进行了专业技能培训，双方签订了约定服务期限的协议。劳动者在服务期限内提前离职，根据《劳动合同法》第二十二条的规定，应当按照约定向用人单位支付违约金。但违约金的数额不得超过用人单位提供的培训费用，且不得超过服务期尚未履行部分所应分摊的培训费用。
- 举例：假设用人单位为劳动者提供了价值5万元的培训，并约定服务期为5年。劳动者在服务了2年后提前离职，那么其需要支付的违约金不得超过3万元（即剩余3年服务期所应分摊的培训费用）。
违反竞业限制条款：
- 劳动合同中若明确规定了竞业限制条款，即劳动者在离职后一定期限内不得从事与原单位有竞争关系的业务，且用人单位在竞业限制期限内按月给予劳动者经济补偿。劳动者违反该条款的，根据《劳动合同法》第二十三条的规定，应当按照约定向用人单位支付违约金。
三、特殊情况下的责任承担
- 造成损失需赔偿：虽然劳动者在某些情况下不需要支付违约金，但如果其提前离职给用人单位造成了实际损失（如项目延期、客户流失等），并且这种损失是由于劳动者的过错直接导致的，用人单位有权根据相关法律法规要求劳动者承担相应的赔偿责任。这种赔偿责任与违约金不同，它是以实际损失为基础进行计算的。
四、建议与总结
- 建议：在决定离职前，劳动者应仔细阅读劳动合同中的相关条款，特别是关于违约金和竞业限制的部分。如果不确定自己的离职行为是否会触发违约金条款，建议先与用人单位进行沟通协商，以避免不必要的法律纠纷。
- 总结：与单位签了合同不想干了，是否需要交违约金，取决于合同中的具体约定以及离职的具体情况。在大多数情况下，依法提前通知用人单位即可解除劳动合同，无需赔偿；但在特定情况下，如违反服务期约定、竞业限制条款或因劳动者过错导致损失时，可能需要承担赔偿责任。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。