结论：行政案件中，若律师未开庭而案件直接判决，是否应退回费用需视具体情况而定，包括合同约定、律师实际工作情况以及判决结果对委托人权益的影响等。
详细分析：
合同约定：
- 首先，应查看您与律师签订的委托合同中是否有关于此类情况的具体约定。如果合同中明确规定了在未开庭情况下律师应如何收费或退费，那么应按照合同约定执行。
律师实际工作情况：
- 即使案件未开庭，律师也可能已经进行了大量的前期工作，如研究案情、准备法律文件、与法院沟通等。这些工作同样需要投入时间和精力，因此，律师有权根据其实际工作量来收取相应的费用。
- 如果律师在案件未开庭前已经完成了其应尽的职责，并且这些工作对案件的最终判决产生了积极影响，那么即使案件未开庭，律师也有权收取合理的费用。
判决结果对委托人权益的影响：
- 如果案件的判决结果对您的权益产生了积极影响，即使未开庭，也可能意味着律师的工作起到了关键作用。在这种情况下，您可能需要考虑支付律师相应的费用。
- 反之，如果判决结果对您的权益产生了不利影响，且您认为这与律师的工作失误或未尽职尽责有关，那么您可以与律师协商退费事宜，甚至考虑通过法律途径解决争议。
法律原则与职业道德：
- 根据法律原则和律师职业道德，律师应当诚实守信、勤勉尽责地为客户提供法律服务。如果律师在未开庭情况下未履行其应尽的职责，或者存在其他违约行为，那么您有权要求律师退还部分或全部费用。
建议：
- 与律师沟通：首先，建议您与律师进行坦诚的沟通，了解案件未开庭的具体原因以及律师在前期所做的工作。通过沟通，您可以更好地评估律师的工作量和价值，从而决定是否要求退费。
- 审查合同：仔细审查您与律师签订的委托合同，了解其中关于退费的具体约定。如果合同中有明确规定，那么应按照合同约定执行。
- 寻求法律援助：如果您与律师在退费问题上无法达成一致，您可以考虑寻求其他法律援助或咨询，以了解您的权益和可能的法律途径。
可能后果：
- 如果您与律师能够就退费问题达成一致，那么问题将得到妥善解决。
- 如果无法达成一致，您可能需要考虑通过法律途径解决争议，如提起诉讼或申请仲裁等。这可能会涉及额外的法律费用和时间成本，因此建议您在采取行动前充分评估利弊。