结论：能否要回配送途中的罚款，需结合罚款性质、合同约定及责任归属综合判断，具体分以下情况分析：

1. 若罚款因物流方过错导致（如超载、违规运输）

• 法律依据：根据《民法典》第832条，承运人对运输过程中货物的毁损、灭失承担赔偿责任，但若毁损、灭失是因不可抗力、货物自然性质或合理损耗造成，且承运人证明无过错，则不担责。
• 关键点：
  • 若罚款系因物流方违反交通法规（如超载、未按规定路线行驶）导致，且您已支付运费，物流方仍需承担违约责任，您有权要求其赔偿罚款损失。
  • 需保留罚款凭证、物流合同、运输记录等证据，证明罚款与物流方过错直接相关。

2. 若罚款因您方原因导致（如货物本身违规）

• 示例：货物属于禁运品（如易燃易爆品），或未如实申报货物信息导致被查扣。
• 法律后果：
  • 根据《民法典》第825条，托运人办理货物运输，应向承运人准确表明收货人名称、货物名称、性质、重量、数量等必要信息。若因托运人过错导致罚款，责任由托运人承担。
  • 此时，您已支付的运费可能因合同违约被物流方扣减，且无权要求返还罚款。

3. 若罚款因不可抗力或第三方原因导致（如自然灾害、政府临时管制）

• 法律原则：根据《民法典》第180条，因不可抗力不能履行民事义务的，不承担民事责任。
• 处理方式：
  • 若罚款系因不可抗力（如台风导致道路封闭）或第三方行为（如交警临时检查）导致，且物流方已尽到合理运输义务，罚款通常由双方协商分担或按合同约定处理。
  • 若合同未约定，可主张按公平原则分担损失。

4. 合同约定优先

• 审查要点：检查运输合同中是否明确约定“罚款承担条款”（如“因乙方原因导致的罚款由乙方承担”）。
• 效力：若合同有明确约定，按约定处理；若无约定，则依据法律规定和过错原则判定。

行动建议：

1. 收集证据：罚款通知单、运输合同、物流跟踪记录、沟通记录等。
2. 与物流方协商：明确罚款原因及责任方，要求书面说明。
3. 法律途径：若协商无果，可向法院起诉或申请仲裁，主张赔偿损失。

如有进一步细节（如合同条款、罚款原因等），可直接向我咨询，我会结合具体情形为您分析。