结论：关于中介费是否应返还，需结合具体情况分析，主要看双方合同约定以及腰伤是否与工作有直接因果关系。以下从不同角度为你详细分析：
一、合同约定角度
若合同中有明确约定：
- 如果中介合同中明确规定了，在劳动者因身体原因无法继续工作时，中介费的退还方式和比例，那么应当按照合同约定来执行。例如，合同可能规定，若劳动者在入职后一定期限内（如一个月内）因身体原因离职，中介需退还一定比例（如50%）的中介费。
- 法律依据：根据《中华人民共和国民法典》的相关规定，依法成立的合同，对当事人具有法律约束力。当事人应当按照约定履行自己的义务，不得擅自变更或者解除合同。
若合同中无明确约定：
- 如果合同中没有对这种情况进行明确约定，那么就需要根据法律规定和公平原则来综合判断。
二、因果关系角度
腰伤与工作有直接因果关系：
- 如果能够证明你的腰伤是在从事该工作时因工作原因导致的，那么你可以向中介和用人单位主张相应的权益。在这种情况下，由于你无法继续工作并非出于个人原因，而是由于工作导致的伤害，因此要求中介返还部分或全部中介费是合理的。
- 建议行动：首先，收集证据证明腰伤与工作有直接关系，如医疗证明、工作记录等。其次，与中介和用人单位进行协商，要求返还中介费。如果协商无果，可以考虑通过法律途径解决。
腰伤与工作无直接因果关系：
- 如果腰伤并非因工作原因导致，而是由于你个人原因（如之前就有腰伤、个人生活习惯等）导致的，那么要求中介返还中介费可能缺乏法律依据。
- 特殊情况：即使腰伤与工作无直接因果关系，但如果中介在提供服务过程中存在过错（如未如实告知工作强度、工作环境等），导致你因无法适应工作而离职的，你也可以考虑要求中介承担一定的责任。不过，这需要具体分析中介的过错程度以及你因此遭受的损失。
三、实际操作建议
- 与中介协商：首先，你可以尝试与中介进行友好协商，说明你的情况和诉求，看是否能够达成一致意见。
- 寻求法律援助：如果协商无果，你可以考虑咨询专业律师（即我，刁成路律师，专注于合同纠纷领域），了解你的具体权益和可行的法律途径。
- 准备证据材料：在处理此类纠纷时，证据材料至关重要。因此，请务必收集并保存好所有与腰伤、工作、中介服务相关的证据材料。
最后，我想强调的是，每个案件都有其独特性，因此上述分析仅供参考。如果你有任何具体的法律问题或需要进一步的帮助，请随时向我咨询。