关于您提出的女职工能否在办公楼值夜班的问题，这并非一个简单的“是”或“否”的答案，而是需要结合具体的工作特性、劳动负荷以及用人单位所遵循的劳动法律法规来综合分析。
首先，从法律法规的角度来看，在我国职场环境中，女性员工上夜班并非违法行为。但是，这并不意味着所有情况下女职工都可以无限制地值夜班。特别是当涉及到孕妇时，根据《女职工劳动保护特别规定》，如果孕妇怀孕超过7个月，企业不应继续延长其劳动时间或安排夜班，这是为了保护孕妇和胎儿的健康。
对于普通女员工而言，如果工作需要上夜班，那么用人单位有责任确保以下几点：
工作时间合理：女职工的夜班工作时间应当符合劳动法的规定，不得过度延长，以保证女职工有足够的休息时间。
劳动强度适宜：夜班工作的劳动强度应当适中，避免对女职工的身体健康造成不良影响。
劳动安全卫生条件良好：用人单位应当提供符合标准的劳动安全卫生条件，确保女职工在夜班工作期间的人身安全。
支付相应工资：女职工值夜班时，用人单位应当按照法律规定支付相应的夜班津贴或加班费。
提供必要的劳动防护措施：根据工作性质，用人单位应当为女职工提供必要的劳动防护用品，如安全帽、防护服等。
如果用人单位违反了上述规定，女职工有权依法维护自身权益，包括向劳动监察部门投诉或寻求法律援助。
综上所述，女职工能否在办公楼值夜班并没有一个绝对的答案，而是需要根据具体情况来判断。如果用人单位能够确保夜班工作的合理性、安全性，并遵守相关法律法规，那么女职工是可以值夜班的。反之，如果用人单位存在违规行为，女职工则有权拒绝并维护自己的合法权益。