结论：工作时间变更是否需要变更合同，取决于变更的性质和双方协商的结果。一般来说，如果工作时间变更构成劳动合同内容的实质性变更，那么应当变更合同；如果变更不构成实质性变更，或者双方通过协商达成一致，可能不需要立即变更合同书面条款，但建议以书面形式确认变更内容以避免未来纠纷。
分析说明：
实质性变更需变更合同：
- 根据《中华人民共和国劳动合同法》的相关规定，劳动合同的变更应当遵循平等自愿、协商一致的原则，且变更后的劳动合同文本由用人单位和劳动者各执一份。工作时间作为劳动合同的重要内容之一，如果发生变更，且这种变更对劳动者的权益产生实质性影响（如从标准工时制变更为综合计算工时制或不定时工作制，或者工作时间显著延长或缩短），那么应当视为劳动合同内容的实质性变更，需要双方协商一致并变更劳动合同。
非实质性变更或协商一致的情况：
- 如果工作时间的变更不构成实质性变更（如微调上下班时间，且不影响劳动者的休息权和劳动报酬），或者双方通过协商达成一致，可能不需要立即变更劳动合同的书面条款。然而，为了保障双方的权益，避免未来可能出现的纠纷，建议即使是小范围的变更也最好以书面形式进行确认，并由双方签字或盖章。
未变更合同的可能后果：
- 如果用人单位未经劳动者同意擅自变更工作时间，且这种变更构成劳动合同内容的实质性变更，那么用人单位可能构成违法变更劳动合同，需要承担相应的法律责任。劳动者有权要求用人单位按照原劳动合同履行义务，或者要求用人单位支付因违法变更劳动合同而造成的损失。
特殊场景：
- 在某些特殊情况下，如因生产经营需要、不可抗力等因素导致工作时间需要临时调整，且这种调整是暂时的、非实质性的，用人单位可能不需要立即变更劳动合同。但即便如此，用人单位也应当及时与劳动者沟通说明情况，并尽量在调整结束后恢复原工作时间安排。
行动建议：
- 对于劳动者：如果发现用人单位擅自变更了工作时间，且这种变更对自己的权益产生了实质性影响，应当及时与用人单位沟通协商，要求按照原劳动合同履行义务或给予相应的补偿。如果协商无果，可以向当地劳动监察部门投诉或申请劳动仲裁。
- 对于用人单位：在变更工作时间前，应当充分与劳动者沟通协商，确保变更内容得到劳动者的同意。如果变更构成实质性变更，应当及时变更劳动合同书面条款，并由双方签字或盖章确认。同时，用人单位也应当关注变更后可能带来的法律风险，并采取相应的措施进行防范。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。