首先，我们要明确，你在工厂大楼的请假时间被无故调走，这可能涉及到了劳动权益的问题。以下是我为你提供的处理建议：

1. 了解公司规定：

   • 首先，建议你查阅公司的员工手册或相关规章制度，了解关于请假、调岗或工作时间调整的具体规定。这有助于你判断公司的行为是否符合内部规定。

2. 与直接上级沟通：

   • 如果公司的规定并未明确支持这种无故调走请假时间的做法，你应当首先与你的直接上级进行沟通，表达你的困惑和不满，并请求解释和纠正。

3. 寻求人力资源部门帮助：

   • 如果与上级沟通无果，或者你觉得问题没有得到妥善解决，可以向公司的人力资源部门反映情况。他们通常负责处理员工与公司之间的纠纷，并能提供更专业的指导和帮助。

4. 考虑法律途径：

   • 如果上述步骤都无法解决问题，且你认为公司的行为严重侵犯了你的合法权益，你可以考虑咨询律师（比如我）或通过法律途径来维护自己的权益。例如，根据《劳动法》的相关规定，员工有权享受合法的休息和休假时间，公司无故剥夺员工的这一权益可能构成违法行为。

5. 保留证据：

   • 在整个过程中，建议你保留所有与请假时间被调走相关的证据，如邮件、聊天记录、公司通知等。这些证据在后续处理纠纷时可能起到关键作用。

综上所述，面对请假时间被无故调走的情况，你应当先了解公司规定，再与上级和人力资源部门沟通，必要时考虑法律途径来维护自己的权益。如果你在这个过程中有任何疑问或需要进一步的法律帮助，请随时向我咨询。