结论：在诉讼费法院退回，但应承担诉讼费的一方不缴纳的情况下，通常由法院负责执行诉讼费的缴纳。若法院执行困难，可能会采取一系列措施来确保诉讼费的缴纳，甚至可能涉及对拒不缴纳方的法律制裁。
详细分析：
法院的执行责任：
- 根据一般的司法实践，当法院作出判决或裁定，确定某一方应承担诉讼费时，该方有义务按照法院的指示缴纳诉讼费。
- 如果应承担诉讼费的一方不缴纳，法院有责任采取执行措施，以确保诉讼费的缴纳。这可能包括发出执行通知书、查封财产、冻结银行账户等措施。
执行措施的具体实施：
- 法院在执行诉讼费时，会依据相关法律法规和司法解释，采取合法、合理的执行措施。
- 如果被执行方有可供执行的财产，法院可以依法查封、扣押或拍卖这些财产，以抵偿诉讼费。
- 如果被执行方没有可供执行的财产，或者财产不足以抵偿诉讼费，法院可能会采取其他措施，如限制被执行方的高消费行为、将其纳入失信被执行人名单等。
拒不缴纳的法律后果：
- 如果被执行方拒不缴纳诉讼费，且法院采取的执行措施未能取得效果，法院可能会对其采取更严厉的法律制裁。
- 这可能包括罚款、拘留等措施，甚至可能构成拒不执行判决、裁定罪，面临刑事处罚。
特殊情况的处理：
- 在某些特殊情况下，如被执行方确实无力缴纳诉讼费，且没有可供执行的财产，法院可能会考虑减免部分或全部诉讼费。
- 但这种情况需要被执行方提出申请，并提供相关证据证明其确实无力缴纳。
建议与行动：
- 如果您是应缴纳诉讼费的一方，但确实无力缴纳，建议及时向法院提出申请，说明情况，并提供相关证据。
- 如果您是诉讼费的退回方，且发现应缴纳方未缴纳诉讼费，可以向法院反映情况，要求法院采取执行措施。
- 在任何情况下，都建议保持与法院的沟通，及时了解案件进展和执行情况。
进一步思考：
- 在实际操作中，法院执行诉讼费的过程可能会受到多种因素的影响，如被执行方的财产状况、执行难度等。
- 因此，在涉及诉讼费缴纳的问题时，建议各方保持理性，积极配合法院的工作，以维护司法公正和效率。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询，我会根据您的具体情况提供详细的法律建议。