结论：员工是否被视为自离，不能仅凭未按照文员电话通知回去上班就判定，需结合书面通知内容、公司规章制度以及员工未到岗的具体原因等多方面因素综合判断。
详细分析：
书面通知的效力：
- 公司以书面形式通知员工回去上班，这是具有法律效力的行为。书面通知能够明确表达公司的意图和要求，员工应当予以重视并按照通知要求执行。
- 如果书面通知中明确规定了到岗时间、地点以及未到岗的后果，员工未按照通知要求到岗，公司有权根据通知内容采取相应的措施。
文员电话通知的性质：
- 文员作为公司的员工，其电话通知员工上班的行为，在一般情况下，可以视为公司行为的传达。但是，电话通知的效力相对较低，因为它缺乏书面证据，容易在后续产生争议。
- 如果公司仅通过电话通知员工上班，而未提供书面通知，员工未到岗时，公司不能仅凭电话记录就判定员工自离。
员工未到岗的原因：
- 员工未按照通知要求到岗，可能有多种原因，如个人原因、家庭原因、健康原因等。如果员工能够提供合理的解释和证据，证明其未到岗并非出于故意或恶意，公司不应轻易判定员工自离。
- 如果员工无正当理由未到岗，且公司已经通过书面形式明确通知了到岗要求和后果，那么公司有权根据规章制度判定员工自离，并采取相应的措施，如解除劳动合同等。
公司规章制度的适用：
- 公司规章制度是公司管理员工的重要依据。如果公司规章制度中明确规定了员工未按照通知要求到岗的处理方式，公司应当按照规章制度执行。
- 但是，公司规章制度必须合法合规，且已经向员工公示或告知。如果公司规章制度存在违法或未向员工公示的情况，那么该规章制度不能作为判定员工自离的依据。
法律建议：
- 对于员工而言，如果收到公司的书面通知要求回去上班，应当认真对待并按照通知要求执行。如果因特殊原因无法到岗，应当及时与公司沟通并说明情况，提供合理的解释和证据。
- 对于公司而言，如果员工未按照通知要求到岗，应当先了解员工未到岗的原因，并根据公司规章制度和实际情况进行判断。如果判定员工自离，应当确保有充分的证据和合理的依据，并按照法定程序进行处理。
可能后果：
- 如果公司错误判定员工自离并采取不当措施，如解除劳动合同等，员工有权向劳动仲裁机构申请仲裁或向法院提起诉讼，要求公司承担相应的法律责任。
- 如果员工无正当理由未到岗且被公司正确判定为自离，公司有权根据规章制度采取相应的措施，如扣除工资、解除劳动合同等。但是，公司在采取措施时应当确保合法合规，避免侵犯员工的合法权益。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。