如果您与赌博被骗者之间有转账记录，但您并未参与赌博活动，那么您通常不会被直接作为赌博案件的调查对象。不过，以下是一些可能的情况和法律分析：

1. 转账记录的性质：

   • 转账记录本身只是资金往来的证明，并不直接等同于赌博证据。
   • 如果您能证明这些转账是出于其他合法目的（如借款、还款、购物等），并且与赌博无关，那么您就不会因此受到牵连。

2. 执法机关的调查：

   • 在赌博案件的调查中，执法机关可能会查询与赌博相关人员的资金往来情况。
   • 如果您与赌博被骗者之间有资金往来，但您并未参与赌博，您可能需要配合执法机关的调查，提供相关的证据和说明。

3. 您的法律责任：

   • 只要您没有参与赌博活动，就不会因此承担法律责任。
   • 但如果您明知他人赌博而为其提供资金帮助或掩饰、隐瞒赌博所得，那么您可能会因此承担相应的法律责任。

4. 建议与措施：

   • 保留证据：妥善保留您与赌博被骗者之间的转账记录和其他相关证据，以证明您的清白。
   • 积极配合：如果执法机关要求您配合调查，请积极提供协助，并如实说明情况。
   • 法律咨询：如果您担心自己可能受到牵连或需要法律帮助，请及时咨询专业律师。

综上所述，只要您未参与赌博活动，并且能证明转账记录与赌博无关，您通常不会被直接作为赌博案件的调查对象。不过，为了防范潜在的法律风险，建议您保留好相关证据，并积极配合执法机关的调查。如有进一步需要，您可以继续咨询我。