如果公安机关违法调查且最终确认没有违法事实，是可以追究对方（即公安机关或相关责任人员）的责任的，但具体责任形式和追究途径需根据实际情况来分析。以下从几个角度详细说明：

1. 行政责任角度：

   • 公安机关在调查过程中，必须严格遵守法定程序和权限。如果公安机关在调查中存在违法行为，如非法搜查、非法扣押、超期羁押等，即使最终确认没有违法事实，相关责任人员也可能因违反行政程序或滥用职权而承担行政责任。
   • 行政责任的形式可能包括警告、记过、记大过、降级、撤职、开除等行政处分，以及可能的行政赔偿（如果违法行为给当事人造成了实际损失）。

2. 刑事责任角度：

   • 在极端情况下，如果公安机关的调查行为构成犯罪，如滥用职权罪、玩忽职守罪、非法搜查罪等，相关责任人员可能面临刑事追究。
   • 刑事责任的追究需要严格的证据和法律程序，通常涉及检察院的公诉和法院的审判。

3. 民事责任角度：

   • 如果公安机关的违法调查行为给当事人造成了实际损失（如名誉损害、经济损失等），当事人有权要求公安机关或相关责任人员承担民事赔偿责任。
   • 民事赔偿的请求通常需要通过民事诉讼程序来实现，当事人需要提供充分的证据证明其损失与公安机关的违法调查行为之间存在因果关系。

4. 救济途径：

   • 当事人如果认为公安机关的调查行为违法，可以先向公安机关的上级机关或同级政府提出行政复议申请，要求撤销或变更违法调查行为。
   • 如果对行政复议结果不满意，当事人还可以向法院提起行政诉讼，要求法院判决确认公安机关的调查行为违法，并可能要求赔偿损失。
   • 在刑事责任方面，如果当事人认为公安机关的调查行为构成犯罪，可以向检察院举报或控告，要求检察院依法追究相关责任人员的刑事责任。

建议：

• 如果你遇到了公安机关违法调查且最终确认没有违法事实的情况，建议你首先收集并保存好所有相关证据，包括调查通知、调查记录、询问笔录、现场照片或视频等。
• 然后，你可以根据上述救济途径，选择适合的方式向相关部门提出申诉或控告。
• 在整个过程中，如果你感到困惑或需要法律帮助，可以直接向我咨询，我会根据你的具体情况提供专业的法律建议。