结论：合同上约定由被告承担诉讼费，但被告不愿意承担时，诉讼费一般不能直接退还，但原告可通过法律途径要求被告承担。具体能否实现，需结合合同约定、实际履行情况及法律规定综合判断。以下从不同角度详细分析：

一、合同约定与诉讼费承担的法律依据

1. 合同自由原则：根据《民法典》相关规定，合同双方可就诉讼费承担进行约定，该约定不违反法律、行政法规强制性规定的，具有法律效力。若合同明确约定“诉讼费由被告承担”，则该条款对双方具有约束力。
2. 诉讼费承担的法定规则：根据《诉讼费用交纳办法》第二十九条，诉讼费用由败诉方负担，胜诉方自愿承担的除外。部分胜诉、部分败诉的，法院根据案件具体情况决定当事人各自负担的诉讼费用数额。若合同约定与法定规则冲突，可能因违反强制性规定而无效，但实践中法院可能优先适用法定规则，或结合合同目的、公平原则进行裁量。

二、被告拒绝承担诉讼费时的处理方式

1. 原告垫付后追偿：若原告已垫付诉讼费，可依据合同约定向被告主张权利。若被告拒不履行，原告可向法院申请强制执行，要求被告支付垫付的诉讼费及可能产生的利息、执行费用等。
2. 法院裁决与执行：法院在判决中可能直接依据合同约定或法定规则，裁决诉讼费由被告承担。若被告未主动履行，原告可申请强制执行，法院将依法查封、扣押、冻结被告财产，直至费用清偿。
3. 合同条款效力审查：若被告主张合同条款无效（如因欺诈、胁迫、显失公平等），需提供证据证明。法院将审查合同签订过程、条款内容及双方实际履行情况，综合判断条款效力。

三、特殊情形下的诉讼费处理

1. 合同部分无效或可撤销：若合同因其他条款无效或被撤销，导致诉讼费承担条款失去基础，法院可能根据公平原则重新分配诉讼费。例如，合同因重大误解订立，双方均有过错的，诉讼费可能由双方分担。
2. 调解或和解结案：若双方在诉讼中达成调解或和解协议，可自行约定诉讼费承担方式。法院将根据协议内容制作调解书或和解协议，该约定具有法律效力。
3. 被告履行能力不足：若被告确无履行能力（如破产、资不抵债等），原告可能面临诉讼费无法追回的风险。此时，原告可考虑通过其他途径（如保险、风险代理等）降低损失。

四、实务建议

1. 完善合同条款：在合同中明确约定诉讼费承担方式，并注明“本条款不因合同其他条款无效而无效”，以增强条款独立性。
2. 保留证据：保存合同原件、履行凭证、沟通记录等证据，以证明合同约定及被告拒不履行的事实。
3. 及时主张权利：在诉讼中明确提出诉讼费承担请求，避免因未主张而导致权利丧失。
4. 咨询专业律师：若涉及复杂合同或大额诉讼费，建议提前咨询律师，制定诉讼策略，降低风险。

总结：合同约定由被告承担诉讼费时，被告拒绝承担并不直接导致诉讼费退还，但原告可通过法律途径要求被告履行。具体能否实现，需结合合同效力、履行情况及法院裁决综合判断。如有进一步疑问，可直接向我咨询。