到工厂查找人员是否违法，不能一概而论，需要分情况讨论：
合法查找的情况：
- 工厂同意或配合：如果你得到工厂的明确同意或工厂主动配合你查找人员，那么这种行为是完全合法的。工厂作为人员的管理方，有权也有义务协助合法查找。
- 基于合法目的：如果你是基于合法的目的，如寻找失联的亲友、执行公务（如警察执行任务）或履行法律程序（如送达法律文书），并且能够提供相应的证明文件或手续，那么到工厂查找人员也是合法的。
可能违法的情况：
- 未经允许擅自进入：如果你未经工厂允许，擅自进入工厂区域查找人员，这可能构成非法侵入。工厂作为私人或法人财产，有权拒绝未经授权的进入。
- 干扰工厂正常运营：在查找过程中，如果你的行为干扰了工厂的正常生产、经营秩序，如大声喧哗、阻挠工人工作等，这也可能构成违法行为，如扰乱单位秩序。
- 侵犯他人隐私：在查找过程中，如果你未经他人同意，擅自查看、拍摄或传播他人的个人信息或隐私，这可能构成侵犯隐私权，需要承担相应的法律责任。
法律建议：
- 在到工厂查找人员前，最好先与工厂进行沟通，说明查找的目的和原因，争取工厂的同意和配合。
- 如果工厂拒绝配合或你无法联系到工厂，可以考虑通过法律途径解决，如向法院申请调查令或向公安机关报案。
- 在查找过程中，务必尊重他人的隐私和权益，避免采取过激或违法的行为。
可能后果：
- 如果你的行为被认定为非法侵入或扰乱单位秩序，可能会面临行政处罚，如罚款、拘留等。
- 如果你的行为构成侵犯隐私权，可能需要承担民事赔偿责任，如赔偿精神损失费等。
总结：到工厂查找人员是否违法，取决于你的行为是否合法、是否得到工厂的同意以及是否尊重了他人的隐私和权益。如果你有任何疑问或需要进一步的法律帮助，可以直接向我咨询。