女方起诉离婚时，一般不需要第一次离婚协议书，但具体是否需要提供，需结合实际情况分情况讨论：

1. 若第一次离婚未成功，且未签署正式离婚协议
   如果双方第一次协商离婚时未达成一致，或虽签署了协议但未办理离婚登记（即协议未生效），则起诉时无需提交该协议。此时法院会依据《民法典》关于离婚的规定，审查夫妻感情是否破裂、子女抚养及财产分割等核心问题，与第一次的协商内容无关。

2. 若第一次离婚时签署了协议但未生效
   若双方曾签署离婚协议并准备办理离婚登记，但最终未完成手续（如一方反悔），该协议因未完成法定程序（如未领取离婚证）而不生效。起诉时，该协议可作为“双方曾协商离婚”的证据提交，但法院不会直接依据该协议判决，而是会重新审查夫妻感情、财产状况等事实。

3. 若第一次离婚后复婚，再次起诉离婚
   如果双方第一次离婚后已办理离婚登记，后又复婚，再次起诉离婚时，第一次的离婚协议（如涉及财产分割、子女抚养等）可能成为法院审查的参考，但并非必须提交。此时需重点提供复婚后的共同财产、子女抚养情况等新证据。

关键提醒：

• 起诉离婚的核心是证明“夫妻感情确已破裂”，需准备感情破裂的证据（如分居证明、家暴记录等），而非依赖之前的协议。
  
• 若涉及财产分割或子女抚养争议，建议提前整理财产清单、子女生活现状等材料，以便法院全面审查。
  

如有其他细节需要进一步分析（如协议内容、离婚原因等），可直接向我咨询，我会结合具体情况为您详细解答。