用人单位不可以随意单独更改工作时间，需与劳动者协商一致并遵循法定程序。以下从不同角度详细分析：

1. 劳动合同的约定优先性
   根据《劳动合同法》第17条，工作时间属于劳动合同的必备条款。若用人单位单方面更改工作时间，属于对劳动合同内容的变更。根据《劳动合同法》第35条，变更劳动合同需与劳动者协商一致，并以书面形式确认。若未协商一致，劳动者有权拒绝变更，用人单位不得强制执行。

2. 法定工作时间的限制
   根据《劳动法》第36条，劳动者每日工作时间不超过8小时，平均每周不超过44小时。若用人单位延长工作时间（如加班），需满足以下条件：

• 与工会和劳动者协商；
  
• 每日加班不超过1小时（特殊情况不超过3小时）；
  
• 每月加班不超过36小时；
  
• 支付不低于工资150%（工作日）、200%（休息日）、300%（法定节假日）的加班费。
  若用人单位未经协商强制延长工作时间，劳动者可向劳动监察部门投诉或申请劳动仲裁。

1. 特殊工时制度的适用
   若用人单位因生产特点需实行不定时工作制或综合计算工时工作制，需经劳动行政部门批准，并在劳动合同中明确约定。未经批准擅自实行特殊工时制度，属于违法行为，劳动者可主张权益。

2. 单方面变更的合法性边界
   在以下情况下，用人单位可单方面调整工作时间，但需证明合理性：

• 劳动者因自身原因无法适应原工作时间（如健康问题），双方协商调整；
  
• 不可抗力或紧急情况（如自然灾害、公共事件）导致原工作时间无法继续；
  
• 劳动者严重违反规章制度（如长期旷工），用人单位依据规定调整。
  若用人单位无法证明合理性，劳动者可主张违法变更，要求恢复原工作时间或赔偿损失。

建议：若您遇到用人单位单方面更改工作时间的情况，可先与用人单位协商，要求其提供合法依据；若协商无果，可向当地劳动监察部门投诉或申请劳动仲裁，维护自身合法权益。如有进一步疑问，可直接向我咨询。