不能离开工作单位的时间并不都算作工时，这需要根据具体情况来判断。以下是从不同角度对这一问题的详细分析：

1. 标准工时制下的工时计算：

   • 根据《劳动法》及相关规定，标准工时制为每日8小时，每周40小时。在这段时间内，劳动者处于用人单位的管理和指挥下，从事用人单位安排的工作任务，这段时间自然算作工时。
   • 如果劳动者不能离开工作单位，但并未从事用人单位安排的工作任务，或者处于休息、等待任务等状态，这段时间是否算作工时，需要根据具体情况和用人单位的规章制度来判断。一般来说，如果这段时间是劳动者可以自由支配的，或者用人单位并未要求劳动者必须留在工作单位，那么这段时间可能不算作工时。

2. 加班工时的计算：

   • 如果劳动者在标准工时之外，因用人单位的生产经营需要而延长工作时间，这段时间算作加班工时。加班工时需要用人单位与工会和劳动者协商后确定，且一般每日不得超过1小时，因特殊原因需要延长工作时间的，在保障劳动者身体健康的条件下延长工作时间每日不得超过3小时，但是每月不得超过36小时。
   • 如果劳动者不能离开工作单位是因为加班，且符合上述加班工时的规定，那么这段时间自然算作加班工时，用人单位需要支付相应的加班费。

3. 特殊情况下的工时计算：

   • 在某些特殊情况下，如劳动者处于待命状态、值班状态等，虽然劳动者不能离开工作单位，但并未从事具体的工作任务。这种情况下，工时计算可能需要根据用人单位的规章制度、劳动合同或集体合同的约定来确定。
   • 如果用人单位与劳动者有明确的约定，或者规章制度中有相关规定，那么按照约定或规定执行。如果没有约定或规定，那么需要根据实际情况和公平原则来判断这段时间是否应算作工时。

法律建议：

• 对于劳动者来说，如果对自己的工时计算有疑问，可以首先查阅自己的劳动合同和用人单位的规章制度，了解关于工时计算的具体规定。
• 如果劳动合同或规章制度中没有明确规定，或者规定不明确，劳动者可以与用人单位进行协商，寻求合理的解决方案。
• 如果协商无果，劳动者可以向当地的劳动监察部门投诉或申请劳动仲裁，维护自己的合法权益。

可能法律后果：

• 如果用人单位未按照法律规定或劳动合同约定计算工时，导致劳动者权益受损，劳动者有权要求用人单位支付相应的工资报酬或加班费。
• 如果用人单位的行为构成违法，还可能面临劳动监察部门的处罚，包括罚款、责令改正等。

总之，不能离开工作单位的时间是否算作工时，需要根据具体情况和法律规定来判断。如果你对此有疑问或需要进一步的法律帮助，可以直接向我咨询。