结论：上班两天且只签了交接单未签劳动合同的情况下，您可以选择不去，但需根据具体情况考虑可能产生的法律后果及应对措施。以下从不同角度为您详细分析：
一、未签劳动合同的法律后果
根据《中华人民共和国劳动合同法》的相关规定，用人单位自用工之日起即与劳动者建立劳动关系，并应当自用工之日起一个月内订立书面劳动合同。若用人单位未在规定时间内与劳动者签订书面劳动合同，劳动者有权要求用人单位支付双倍工资差额（从用工满一个月的次日起计算）。不过，在您仅工作两天的情况下，这一条款尚不直接适用，因为双倍工资差额的支付条件是“用工满一个月未签合同”。
二、选择不去的考虑因素
劳动关系解除：
- 您与用人单位之间尚未签订正式的劳动合同，但已形成事实劳动关系（通过提供劳动、接受管理等方式）。
- 您有权随时解除这种事实劳动关系，但建议提前与用人单位沟通，明确表达离职意愿，并保留好相关证据（如工作记录、交接单等），以避免后续纠纷。
工资及福利待遇：
- 尽管未签合同，但您已实际提供了劳动，用人单位仍应支付您工作期间的工资。
- 若用人单位拒绝支付，您可以通过劳动仲裁等途径维护自己的合法权益。
潜在风险：
- 若您突然离职且未做好工作交接，可能会给用人单位造成损失，用人单位有权要求您承担赔偿责任（但需证明损失与您的离职有直接因果关系）。
- 因此，建议您在离职前与用人单位协商好工作交接事宜，确保平稳过渡。
三、建议措施
与用人单位沟通：
- 明确表达离职意愿，并协商好工作交接、工资支付等事宜。
- 保留好沟通记录（如邮件、短信、微信等），以备后续需要。
保留证据：
- 保存好工作记录、交接单、工资条等证据，以证明您与用人单位之间存在事实劳动关系及您的工作情况。
考虑法律途径：
- 若用人单位拒绝支付工资或存在其他违法行为，您可以向当地劳动监察部门投诉或申请劳动仲裁，维护自己的合法权益。
四、特殊情况说明
- 若用人单位存在违法行为（如拖欠工资、未缴纳社保等），您不仅有权选择不去，还可以向相关部门投诉或申请劳动仲裁，要求用人单位承担相应的法律责任。
- 若您已与用人单位达成口头协议或存在其他约定，也需根据具体情况考虑是否遵守约定或采取相应措施。
最后，虽然您目前仅工作两天且未签劳动合同，但选择不去仍需谨慎考虑。建议您在做出决定前与用人单位充分沟通，并保留好相关证据以维护自己的合法权益。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。