如果不交判决书上确定的退赔款项，可能会面临以下法律后果：

1. 强制执行：

   • 法律依据：根据《中华人民共和国民事诉讼法》的相关规定，如果义务人（即被判决需要退赔的一方）不履行生效法律文书确定的义务，权利人（即获得退赔的一方）可以向人民法院申请强制执行。
   • 执行措施：法院在受理强制执行申请后，会采取一系列执行措施，如查询、冻结、划拨被执行人的存款，查封、扣押、拍卖、变卖被执行人的财产等，以确保退赔款项的到位。

2. 信用惩戒：

   • 列入失信被执行人名单：如果被执行人拒不履行退赔义务，且情节严重，法院可以将其列入失信被执行人名单，并通过信用惩戒系统向社会公布。这将对被执行人的信用记录产生严重影响，限制其高消费行为，如乘坐飞机、高铁等，甚至可能影响其贷款、就业等。
   • 限制出境：在特定情况下，法院还可以对被执行人采取限制出境的措施，以防止其逃避退赔义务。

3. 罚款或拘留：

   • 罚款：如果被执行人拒不履行退赔义务，法院可以对其处以罚款。罚款的数额根据情节轻重而定，但通常会对被执行人造成一定的经济压力。
   • 拘留：在情节严重的情况下，法院还可以对被执行人采取拘留措施，以强制其履行退赔义务。拘留的期限通常较短，但足以对被执行人形成威慑。

4. 刑事责任：

   • 拒不执行判决、裁定罪：如果被执行人有能力执行而拒不执行退赔义务，且情节严重，可能构成拒不执行判决、裁定罪。根据《中华人民共和国刑法》的相关规定，犯此罪的，可处三年以下有期徒刑、拘役或者罚金；情节特别严重的，处三年以上七年以下有期徒刑，并处罚金。

建议：

• 积极履行退赔义务：作为被判决需要退赔的一方，应积极履行退赔义务，以避免上述法律后果的发生。如果确实存在经济困难，可以与权利人协商分期履行或寻求其他解决方案。
• 咨询专业律师：如果你对退赔义务或相关法律后果存在疑问，建议直接向我咨询。我可以根据你的具体情况提供专业的法律意见和帮助。

总之，判决书上的退赔义务是具有法律效力的，必须认真对待并积极履行。否则，将可能面临一系列严重的法律后果。