关于与本案无关的违法所得交到公安账户后退还主体的问题，结论如下：

1. 退还主体通常为公安机关：

   • 当与本案无关的违法所得被交到公安账户后，若经审查确认该款项确实与案件无关，根据相关法律规定及实践操作，退还工作一般由公安机关负责。公安机关在确认款项性质后，会按照法定程序将款项退还给原交款人或合法权利人。

2. 退还流程与依据：

   • 确认款项性质：公安机关首先会对交到账户的款项进行审查，确认其是否与案件有关。若确认无关，则进入退还程序。
   • 退还申请：原交款人或合法权利人需向公安机关提出书面退还申请，并提供相关证明材料，如交款凭证、身份证明等。
   • 审查与决定：公安机关会对退还申请进行审查，并根据审查结果作出是否退还的决定。若决定退还，会通知申请人并办理退还手续。
   • 法律依据：虽然具体退还流程可能因地区而异，但一般遵循《中华人民共和国刑事诉讼法》及相关司法解释中关于涉案财物处理的规定。这些规定明确了涉案财物的保管、处置及退还等程序，为公安机关办理退还工作提供了法律依据。

3. 特殊情况下的退还主体：

   • 在某些特殊情况下，如公安机关因故无法直接退还款项，或款项涉及多个权利人且存在争议时，退还工作可能由法院或其他相关部门介入处理。但这种情况相对较少，且通常会在公安机关的协调下进行。

4. 建议与注意事项：

   • 保留交款凭证：原交款人在交款时应妥善保留交款凭证，以便在需要退还时提供证明。
   • 及时沟通：若发现交到公安账户的款项与案件无关，应及时与公安机关沟通，了解退还流程及所需材料，以便尽快办理退还手续。
   • 法律途径：若对公安机关的退还决定有异议，或退还过程中遇到问题，可以通过法律途径维护自己的合法权益，如申请行政复议或提起行政诉讼等。

总结：与本案无关的违法所得交到公安账户后，退还工作一般由公安机关负责。原交款人或合法权利人需向公安机关提出书面退还申请，并提供相关证明材料。公安机关会依法进行审查并作出决定。若遇到特殊情况或问题，可以通过法律途径维护自己的合法权益。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。