退货时商家要求寄往发货地址以外的地址，这一行为本身并不直接违法，但需结合具体情况判断其合法性与合理性。以下从不同角度进行分析：

1. 合同约定优先

• 若买卖合同或商家退货政策中明确约定了退货地址，则商家要求寄往非发货地址的行为可能构成违约（若该地址与合同约定不符）。根据《民法典》第五百七十七条，当事人一方不履行合同义务或履行合同义务不符合约定的，应承担继续履行、采取补救措施或赔偿损失等违约责任。
• 若合同未明确约定退货地址，商家有权指定合理退货地址，但需确保该地址不违反公平原则或消费者权益保护规定。

2. 消费者权益保护角度

• 根据《消费者权益保护法》第二十五条，消费者退货的商品应当完好，且经营者应自收到退回商品之日起七日内返还支付的商品价款。若商家要求寄往非发货地址导致退货流程复杂化（如增加运费、时间成本），可能侵犯消费者公平交易权。
• 若商家要求寄往的地址存在不合理性（如偏远地区、需额外支付高额运费），消费者可拒绝并要求商家提供合理退货方案。

3. 商家操作合理性

• 商家可能因库存管理、物流优化等原因要求寄往非发货地址，此行为本身不违法，但需提前告知消费者并取得同意。若未告知或强制要求，可能构成对消费者知情权的侵犯。
• 若商家以“非指定地址退货不予退款”等理由威胁消费者，则涉嫌违反《消费者权益保护法》第十六条（经营者不得设定不公平、不合理的交易条件）。

4. 法律建议

• 消费者应首先查看合同或商家退货政策，确认退货地址是否明确约定。若未约定，可要求商家提供书面退货地址说明。
• 若商家要求寄往非发货地址且未提前告知，消费者可拒绝并要求商家按原发货地址退货，或协商其他合理方案。
• 若因商家指定地址导致额外损失（如运费、时间成本），消费者可要求商家赔偿，或通过平台投诉、消费者协会调解等途径维权。

5. 可能的法律后果

• 若商家行为被认定为违约或侵权，可能面临行政处罚（如市场监管部门罚款）或民事赔偿（如赔偿消费者损失）。
• 若消费者因商家不合理要求拒绝退货，商家可能无法以“未收到退货”为由拒绝退款，但需举证证明消费者存在过错。

总结：商家要求寄往非发货地址的行为需结合合同约定、消费者权益保护规定及操作合理性综合判断。若商家未提前告知或要求不合理，消费者有权拒绝并要求合理解决方案。如有争议，建议保留相关证据（如聊天记录、退货政策截图）并咨询专业律师。