针对公职人员经常不去单位的情况，处理方式需根据具体情形和单位规章制度来确定，以下是一些可能的处理角度和建议：
依据单位规章制度处理：
- 规章制度内容：公职人员所在单位通常会有明确的考勤制度、工作纪律等规章制度，这些制度会规定员工应遵守的工作时间、请假流程、旷工处理等内容。
- 处理方式：如果公职人员经常不去单位，且未按照规章制度履行请假手续或存在旷工行为，单位可以依据规章制度对其进行相应的纪律处分，如警告、记过、降级、撤职甚至开除等。
依据法律法规处理：
- 相关法律法规：虽然公职人员的管理主要依据单位规章制度，但《中华人民共和国公务员法》等相关法律法规也对公务员的纪律、处分等作出了规定。
- 处理方式：如果公职人员的行为严重违反了法律法规或单位规章制度，且情节严重，单位可以依法依规对其进行更严厉的处分，甚至移送司法机关处理。
沟通与教育：
- 沟通了解原因：在采取纪律处分之前，单位可以与公职人员进行沟通，了解其经常不去单位的具体原因，如是否因健康问题、家庭原因等导致无法正常出勤。
- 教育引导：如果公职人员存在工作态度问题或缺乏纪律意识，单位可以通过教育引导的方式，帮助其认识到问题的严重性，并督促其改正。
考虑特殊情况：
- 健康问题：如果公职人员因健康问题无法正常出勤，单位应给予一定的理解和支持，并根据实际情况调整其工作任务或安排病假。
- 家庭原因：如果公职人员因家庭原因（如照顾老人、子女等）需要经常请假，单位可以在不违反规章制度的前提下，尽量给予照顾和安排。
在处理公职人员经常不去单位的问题时，单位应注意以下几点：
- 确保处理程序合法合规：单位在处理公职人员时，应确保处理程序合法合规，遵循相关法律法规和单位规章制度的规定，避免侵犯公职人员的合法权益。
- 注重证据收集：单位在处理公职人员时，应注重收集相关证据，如考勤记录、请假手续、沟通记录等，以便在需要时提供证明。
- 保护公职人员隐私：在处理过程中，单位应保护公职人员的隐私，避免泄露其个人信息或不当处理其个人事务。
若公职人员对单位的处理决定存在异议，他们可以通过以下途径维护自己的权益：
- 申诉或复核：公职人员可以向单位或上级主管部门提出申诉或复核申请，要求重新审查处理决定。
- 法律途径：如果公职人员认为单位的处理决定侵犯了其合法权益，他们可以通过法律途径维护自己的权益，如提起行政诉讼等。
最后，建议单位在处理此类问题时，保持公正、公平、公开的原则，确保处理结果的合理性和合法性。同时，公职人员也应自觉遵守单位规章制度和法律法规，认真履行工作职责。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。