关于公职人员是否可以到工厂打工的问题，这主要取决于公职人员的具体身份状态（是否退休）以及相关的法律法规和职业道德规范。以下是对这一问题的详细解答：
一、公职人员退休后的情况
对于已经退休的公职人员，他们到工厂打工通常没有明确的禁止性规定。然而，这并不意味着他们可以毫无顾忌地从事任何工作。退休后，他们仍需遵守以下原则：
不得利用原职务影响力：退休公职人员不能利用在职期间的影响力为工厂或其他企业谋取不正当利益，这是维护市场公平竞争的基本原则。
保密义务：他们不得泄露原工作单位的商业秘密、国家机密等重要信息，以保护原工作单位的合法权益和国家安全。
遵守离职后从业限制：对于曾任领导成员、县处级以上领导职务的公务员，在离职三年内；其他公务员在离职两年内，存在特定的从业限制，即不得到与原工作业务直接相关的企业或者其他营利性组织任职，也不得从事与原工作业务直接相关的营利性活动。如果工厂的业务与公职人员原工作业务直接相关，且公职人员属于上述限制范围内，则他们不能到该工厂打工。
二、公职人员在职期间的情况
对于在职的公职人员，他们通常不能到工厂打工或从事其他营利性活动。这是因为公职人员的职责是全心全意为人民服务，他们的时间和精力应该主要投入到公共事务中。此外，公职人员在职期间从事营利性活动可能会引发利益冲突、权力寻租等问题，损害公共利益和市场秩序。
三、其他注意事项与建议
了解并遵守相关规定：无论是退休还是在职的公职人员，在考虑到工厂打工前，都应详细了解并遵守相关的法律法规和职业道德规范。
咨询专业人士意见：如果公职人员对相关规定存在疑问或不确定自己的行为是否合法合规，建议咨询相关部门或法律专业人士的意见。
考虑个人职业规划：公职人员在考虑是否到工厂打工时，还应考虑自己的职业规划和个人发展。如果打工行为与自己的职业规划相悖或可能影响自己的职业发展，那么应谨慎考虑。
综上所述，公职人员是否可以到工厂打工取决于他们的具体身份状态以及相关的法律法规和职业道德规范。退休公职人员在遵守相关规定的前提下可以到工厂打工；而在职公职人员则通常不能从事此类营利性活动。