结论：针对您的情况，若合同中约定的“一年离职违约金五万”条款可能因违法而无效，您通常无需支付该违约金；若该条款有效，您也可能因未实际上班而无需支付或仅需支付部分违约金。但具体还需结合合同条款、培训性质及实际损失等因素综合判断。以下为详细分析：
一、违约金条款的合法性分析
违约金条款的效力：
- 根据《劳动合同法》的相关规定，用人单位与劳动者约定由劳动者承担违约金的情形仅限于两种：一是用人单位为劳动者提供专项培训费用，对其进行专业技术培训，并约定服务期，劳动者违反服务期约定的；二是用人单位与劳动者约定竞业限制条款，劳动者违反竞业限制约定的。
- 若您与用人单位签订的合同中约定的“一年离职违约金五万”并不属于上述两种情形之一，则该违约金条款可能因违反法律强制性规定而无效。
培训的性质：
- 您仅进行了一天培训，需判断该培训是否属于用人单位为劳动者提供的专项培训费用，并对其进行专业技术培训。若仅为入职培训或一般性培训，则通常不构成专项培训，违约金条款可能无效。
二、实际损失与违约金支付
实际损失的考量：
- 即使违约金条款有效，用人单位要求您支付违约金时，也需证明其因您离职而遭受了实际损失，且该损失与您的离职存在直接因果关系。
- 在您仅进行了一天培训且未实际上班的情况下，用人单位可能难以证明其遭受了实际损失。
违约金的调整：
- 若用人单位能够证明其遭受了实际损失，且该损失与您的离职存在直接因果关系，但约定的违约金数额过高，您可以请求人民法院或仲裁机构予以适当减少。
三、您的应对策略
审查合同条款：
- 仔细审查您与用人单位签订的合同，特别是关于违约金的条款，判断其是否合法有效。
与用人单位协商：
- 尝试与用人单位进行协商，说明您的情况和理由，争取达成和解或减免违约金的协议。
寻求法律援助：
- 若协商无果，您可以向当地劳动争议仲裁委员会申请仲裁，或向人民法院提起诉讼，以维护您的合法权益。在仲裁或诉讼过程中，您可以提供相关证据证明违约金条款的无效性或用人单位未遭受实际损失等事实。
四、风险提示
- 法律程序风险：若您选择通过仲裁或诉讼解决争议，需承担一定的法律程序风险和时间成本。
- 信用记录风险：虽然违约金条款可能无效或您无需支付全部违约金，但您的离职行为仍可能对您的信用记录产生一定影响。因此，在离职前建议与用人单位妥善沟通并办理相关手续。
建议：在处理此类问题时，建议您保持冷静并仔细审查合同条款及相关法律法规。如有需要，您可以随时向我咨询相关法律问题，我将根据您的具体情况提供详细的法律建议和帮助。