单位的委托代理人不一定是律师。在实际情况中，公民、法人以及其他组织都能够充当委托代理人。具体来说：
可以是律师：律师因其专业的法律知识和经验，往往能够更好地为委托人提供法律服务，特别是在复杂的法律事务中，律师的参与能够更有效地维护委托人的合法权益。
也可以是非律师：如当事人的近亲属、工作人员，或者所在单位、社区以及有关社会团体推荐的公民，甚至经人民法院许可的其他公民，都可以被委托为诉讼代理人。这些人员可能因其与委托人的特殊关系或对其事务的了解，而具备一定的代理能力和可信度。
在选择委托代理人时，应根据案件的性质、委托人的需求以及代理人的专业能力和经验等因素进行综合考虑。如果案件涉及复杂的法律问题或需要专业的法律操作，那么选择律师作为委托代理人可能更为合适。而如果案件相对简单，或者委托人更看重代理人的其他特质（如熟悉情况、便于沟通等），那么选择非律师作为委托代理人也是可行的。
总之，单位的委托代理人并不一定要是律师，而是可以根据实际情况和需要进行选择。如果你在这方面有进一步的疑问或需要具体的法律建议，可以直接向我咨询。