付给律师的代理费是可以索要发票的。下面我详细为你解释一下：

1. 律师收费的正规性：律师提供法律服务并收取代理费，这是一种正规的商业行为。因此，按照相关法律法规和财务规定，律师事务所在收取代理费后，应当向当事人开具正规的发票。

2. 发票的法律意义：发票是记录交易行为的重要凭证，也是当事人维护自身权益的重要依据。如果律师事务所未开具发票，那么当事人在未来若与律师事务所发生纠纷，可能会因缺乏有效证据而面临维权困难。

3. 索要发票的合理性：基于上述两点，当事人完全有权向律师事务所索要代理费的发票。这不仅是当事人的合法权益，也是确保交易透明、合法的重要保障。

所以，如果你已经支付了律师代理费，但尚未收到发票，你可以向律师事务所明确提出索要发票的要求。如果他们拒绝开具，你可以向相关部门进行投诉，以维护自己的合法权益。