结论前置：被害人并非必须提供发票，但发票可能作为证明物品价值的关键证据。以下分情况说明：

1. 退赃环节的证明要求
   小偷退还物品时，被害人主要需证明两点：

   • 物品所有权：可通过购买记录、使用痕迹、证人证言等证明（发票是直接证据，但非唯一证据）；
     
   • 物品价值：若需追究刑事责任（如盗窃罪），需证明物品价值达到立案标准。此时发票是证明市场价格的最直接证据，但若缺失，可通过以下方式替代：
     
     • 第三方机构评估（如物价局鉴定）；
       
     • 同型号物品的市场售价证明；
       
     • 嫌疑人供述或证人证言佐证。

2. 民事赔偿环节的证明要求
   若被害人主张民事赔偿（如物品损坏或折旧），发票可证明原始购买价格，但若无发票，法院可能根据以下因素酌定赔偿金额：

   • 物品使用年限及折旧情况；
     
   • 市场同类物品的现值；
     
   • 双方举证能力（若被害人能提供其他证据链，法院可能支持合理赔偿）。

3. 实务建议

   • 优先保留发票：购买贵重物品时务必保存发票，避免后续举证困难；
     
   • 替代证据收集：若发票丢失，可尽快通过拍照、录像、聊天记录等方式固定物品特征及价值线索；
     
   • 及时报警并配合调查：公安机关在侦查阶段会协助固定证据，被害人需如实陈述物品情况。

总结：发票是证明物品价值的重要证据，但非绝对必要。被害人应通过多种方式固定证据，以确保权益得到充分保障。如有具体案件或证据问题，可进一步向我咨询。