结论：针对您支付5000元定金，对方仅退还1900元、扣留3100元的情况，您可通过协商、投诉或诉讼途径追回被扣款项，具体需结合定金性质、合同约定及对方行为合法性综合判断。以下为详细分析：

一、明确“定金”的法律性质及对方扣款依据

1. 若为“定金”且合同有效
   根据《民法典》第586条，定金数额不得超过主合同标的额的20%，超过部分不产生定金效力。若您支付的5000元符合定金性质（如合同明确约定“定金”且未超限额），对方扣款需满足以下条件之一：

   • 您存在根本违约行为（如未按约定履行合同主要义务）；
     
   • 合同明确约定对方在特定情形下可扣留定金（如您单方解除合同且无合法理由）。
     若对方无法证明您违约或合同无相关约定，其扣款行为可能构成违法，您有权要求全额返还。

2. 若为“预付款”或“订金”
   若合同未明确约定“定金”性质，或实际为“预付款”“订金”，则对方无权单方扣留款项。您可要求对方返还全部剩余金额（3100元），并可主张对方承担资金占用期间的利息损失。

二、追回款项的具体途径

1. 协商解决

   • 步骤：与对方沟通，要求其出具扣款依据（如合同条款、您违约的证据等）。若对方无法提供合理理由，可明确要求返还3100元，并保留书面沟通记录（如微信、邮件）。
     
   • 优势：成本低、效率高，适合双方争议较小的情况。

2. 投诉举报

   • 适用情形：若对方存在欺诈、虚假宣传等违法行为（如虚构合同目的、诱导您支付定金后拒不履行义务）。
     
   • 途径：向当地市场监督管理部门（12315）或消费者协会投诉，提供支付凭证、合同、沟通记录等证据，要求调解或查处。

3. 诉讼维权

   • 前提：协商、投诉无果，或对方扣款行为明显违法（如无合法依据扣留款项）。
     
   • 流程：
     
     1. 准备证据：支付凭证（转账记录、收据）、合同文本、沟通记录、对方扣款通知等；
        
     2. 起草起诉状，明确诉讼请求（返还3100元及利息）、事实与理由；
        
     3. 向被告住所地或合同履行地法院提起民事诉讼，主张对方返还被扣款项并承担诉讼费用。
        
   • 注意：若定金未超标的额20%，您可同时主张对方返还超额部分（如合同标的额为2万元，定金上限为4000元，超额1000元应返还）。

三、关键风险提示

1. 证据保留：务必保存所有与交易相关的书面材料、电子数据（如聊天记录、录音），避免因证据不足导致维权失败。
   
2. 时效限制：民事诉讼时效为3年，自您知道或应当知道权利受损之日起计算，建议尽快行动。
   
3. 定金与违约金区分：若合同同时约定定金和违约金，您只能选择其一主张，不可叠加适用。

建议：优先通过协商或投诉解决，若对方态度强硬或扣款行为明显违法，可直接向我咨询诉讼策略及证据准备细节。