结论前置：民事赔偿金对方不收，一般不能直接去法院要回，但可以通过特定法律程序处理，具体分以下几种情况。
对方明确拒绝接收赔偿金 若对方以书面形式明确表示拒绝接收赔偿金，或者虽未书面拒绝但通过实际行动表明不接受（如多次联系均拒收），此时赔偿义务人不能直接将钱交至法院要求“退回”。正确的做法是，将赔偿金进行提存。提存是指由于债权人的原因而无法向其交付合同标的物时，债务人将该标的物交给提存部门而消灭债务的制度。在我国，提存部门一般是公证处。赔偿义务人向公证处办理提存后，即视为履行了赔偿义务，此后因该赔偿金产生的风险和责任由对方承担。办理提存时，需要提供相关的证明材料，如赔偿协议、对方拒收的证据等。
对方无正当理由拒收且无法联系 如果对方无正当理由拒收赔偿金，并且通过合理方式（如按照对方提供的地址邮寄通知、前往对方住所地寻找等）仍无法联系到对方，赔偿义务人同样可以选择提存的方式处理赔偿金。在提存后，赔偿义务人应保留好提存的相关凭证，以证明自己已经履行了赔偿义务。若后续对方出现并主张赔偿，赔偿义务人可以凭借提存凭证进行抗辩。
对方拒收但存在争议 若对方拒收赔偿金是因为对赔偿金额、赔偿项目等存在争议，此时不能直接去法院要回赔偿金。双方应先就争议事项进行协商，尝试达成一致意见。如果协商不成，任何一方都可以向法院提起诉讼，由法院根据事实和法律规定对赔偿事项进行判决。在诉讼过程中，法院会根据双方提供的证据和法律规定，确定最终的赔偿金额和赔偿方式。如果法院判决赔偿义务人支付赔偿金，而对方仍拒收，赔偿义务人可以按照法院的判决结果进行提存。