情侣荷包对方贷款扣你的钱，是否能退回，取决于多种因素。下面我将从不同角度为你详细分析这个问题：

1. 贷款合同约定：

   • 首先，需要查看贷款合同中是否有关于扣款或共同还款的约定。如果合同中明确规定了情侣荷包中的一方在特定情况下可以被扣款用于偿还另一方的贷款，那么这种扣款可能是合法的，退回的可能性较小。
   • 如果合同中没有相关约定，或者约定不明确，那么扣款行为可能构成违约或侵权，你有权要求退回被扣款项。

2. 法律关系界定：

   • 情侣荷包通常是一种基于信任和共同管理财务的约定，但并不构成法律上的共同债务关系。除非双方有明确的书面协议，否则一方不应承担另一方的贷款还款责任。
   • 如果你的钱被用于偿还对方的贷款，且没有你的明确同意，这可能涉及到你财产权的侵犯，你有权寻求法律救济。

3. 证据收集与维权途径：

   • 为了维护自己的权益，你需要收集相关证据，如贷款合同、扣款记录、聊天记录等，以证明扣款行为的合法性和你的财产权受到侵犯的事实。
   • 在证据充分的情况下，你可以通过协商、调解、诉讼等方式要求对方退回被扣款项。如果协商无果，可以考虑向法院提起诉讼，请求法院判决对方返还财产并赔偿损失。

综上所述，情侣荷包对方贷款扣你的钱是否能退回，取决于贷款合同的约定、法律关系的界定以及你能否提供充分的证据来维护自己的权益。如果你在这方面遇到任何问题或需要进一步的法律帮助，请随时向我咨询。