结论：外地警察在知道您也是被害人的情况下还要求您退赔，这一行为是否合理合法，需结合具体情况来判断，不能一概而论。以下从多个角度为您详细分析：
一、警察要求退赔的合法性基础
法律依据：
- 警察要求退赔通常基于《中华人民共和国刑法》中关于犯罪所得追缴和退赔的规定。如果您的行为或财产与犯罪活动有关联，且被认定为犯罪所得或违法所得，那么警察有权要求您退赔。
- 同时，如果案件涉及多个被害人，且您的行为对其他被害人造成了损失，警察也可能根据案件具体情况，要求您承担相应的退赔责任。
程序要求：
- 警察在要求您退赔时，应当遵循法定程序，如出具相关法律文书、说明退赔理由和依据等。
- 您有权要求警察出示相关证据和法律依据，以确认退赔要求的合法性和合理性。
二、您作为被害人的权益保护
被害人地位确认：
- 如果您确实是被害人，且您的权益受到了侵害，那么您有权要求犯罪嫌疑人或被告人进行赔偿。
- 警察在处理案件时，应当充分保护您的合法权益，不得随意要求您退赔。
退赔与赔偿的区别：
- 退赔通常指的是将犯罪所得或违法所得退还给国家或被害人，而赔偿则是指犯罪嫌疑人或被告人因其犯罪行为给被害人造成的损失进行的经济补偿。
- 如果您作为被害人没有获得任何犯罪所得或违法所得，那么警察要求您退赔可能缺乏法律依据。
三、可能存在的特殊情况
共同犯罪或关联犯罪：
- 如果您涉及共同犯罪或关联犯罪，且您的行为对其他被害人造成了损失，那么警察可能根据案件具体情况要求您承担退赔责任。
- 在这种情况下，您需要仔细审查案件事实和法律规定，以确认自己是否应当承担退赔责任。
误解或错误执行：
- 有时候，警察可能由于信息不对称或误解而错误地要求您退赔。
- 如果您认为警察的要求存在误解或错误执行的情况，您可以及时与警察沟通并提供相关证据，以维护自己的合法权益。
四、建议与措施
了解案件情况：
- 您应当积极了解案件的具体情况，包括自己的行为是否涉及犯罪、是否获得了犯罪所得或违法所得等。
咨询专业律师（此处虽提及咨询律师，但意在强调您应寻求专业帮助，而实际上您已向我咨询，故可理解为建议采取类似行动）：
- 鉴于法律问题的复杂性，我建议您直接向我咨询，以便更详细地了解您的权益和义务，以及如何应对警察的退赔要求。
保留证据：
- 您应当保留与案件相关的所有证据，如交易记录、聊天记录、证人证言等，以便在需要时提供给警察或法院。
合法维权：
- 如果您认为警察的要求不合理或违法，您可以通过合法途径进行维权，如向上级公安机关投诉、申请行政复议或提起行政诉讼等。
最后，我理解您在面对这种情况时可能感到困惑和不安。请放心，我会尽我所能为您提供专业的法律帮助和支持。如果您有任何疑问或需要进一步的法律咨询，请随时向我提问。