结论：在案件初期公安让退赃并主动给办取保候审，后来案件撤销的情况下，您之前退的赃款一般是可以要回来的，但具体能否要回以及要回的程序，还需根据案件的具体情况和相关法律规定来综合判断。
分析说明：
退赃的性质与目的：
- 退赃通常是指犯罪嫌疑人或被告人将其非法所得的财物退还给被害人或国家，是量刑时的一个考虑因素，有时也作为取保候审或缓刑等从宽处理的一个条件。
- 在您的案例中，公安要求您退赃并主动给办取保候审，这通常意味着公安认为您有悔罪表现，且退赃有助于案件的解决和社会的和谐。
案件撤销的法律后果：
- 案件撤销意味着司法机关认为该案件不符合起诉条件或存在其他法定撤销情形，因此决定不再继续追究犯罪嫌疑人的刑事责任。
- 案件撤销后，之前因案件而采取的强制措施（如取保候审）也会相应解除，且之前因案件而产生的法律后果（如退赃）也应根据法律规定进行处理。
退赃款的处理：
- 在案件撤销的情况下，您之前退的赃款理论上应该返还给您，因为该款项原本就属于您的合法财产（尽管之前因犯罪行为而被非法占有，但案件撤销后，这一非法占有的状态已不存在）。
- 然而，实际操作中，退赃款的返还可能涉及多个环节和部门，如公安、检察院、法院等，且可能需要您提供相关的证明材料（如退赃凭证、案件撤销决定书等）来申请返还。
可能遇到的障碍与解决方案：
- 障碍：相关部门可能以各种理由拖延或拒绝返还退赃款，如认为退赃款已用于赔偿被害人、支付案件处理费用等。
- 解决方案：您可以向相关部门提出书面申请，要求返还退赃款，并附上相关证明材料。如果相关部门拒绝返还或拖延返还，您可以考虑通过法律途径（如行政诉讼）来维护自己的合法权益。
行动建议：
- 收集证据：首先，您需要收集所有与退赃相关的证据，如退赃凭证、银行转账记录、公安或检察院出具的收据等。
- 了解程序：其次，您需要了解退赃款返还的具体程序和要求，这可以通过咨询当地公安、检察院或法院的相关部门来获取。
- 提出申请：在准备好相关证据和了解清楚程序后，您可以向相关部门提出书面申请，要求返还退赃款。
- 寻求法律帮助：如果相关部门拒绝返还或拖延返还，且您无法自行解决，可以考虑寻求专业律师的帮助，通过法律途径来维护自己的合法权益。
特殊场景：
- 如果退赃款已经被用于赔偿被害人或支付案件处理费用等，且这些费用是合理且必要的，那么您可能无法全额要回退赃款。但即使如此，您也有权了解这些费用的具体使用情况，并要求相关部门提供相关的证明材料。
法律依据：
- 虽然具体的法律依据可能因地区和案件类型而有所不同，但一般来说，案件撤销后，之前因案件而产生的法律后果（如退赃）应根据《中华人民共和国刑法》、《中华人民共和国刑事诉讼法》等相关法律规定进行处理。这些法律通常规定了犯罪嫌疑人或被告人的权利与义务，以及司法机关在处理案件时应遵循的程序和原则。
如有其他疑问或需要进一步的法律帮助，请直接向我咨询。