即使离婚协议书丢失，也可以起诉要求抚养费。因为法律规定，父母对孩子有抚养教育的义务，离婚后不直接抚养孩子的一方需要承担部分或全部抚养费。起诉的关键在于证明亲子关系以及对方未履行支付抚养费的义务。
具体来说，您可以通过以下方式来证明并起诉要求抚养费：
证明亲子关系：出生证明是证明亲子关系的重要证据。您还可以提供其他能够证明您与孩子关系的材料，如户口本、亲子鉴定报告等。
证明离婚事实：虽然离婚协议丢失，但您仍然可以提供离婚证或法院生效的离婚判决书、调解书来证明婚姻关系已经解除。
证明对方未支付抚养费：您可以通过银行转账记录、聊天记录、短信记录、通话录音等证据来证明对方未按照约定支付抚养费。这些证据可以形成完整的证据链，支持您的诉讼主张。
在准备好上述证据后，您可以按照以下步骤起诉要求抚养费：
撰写起诉状：明确原告（通常是直接抚养孩子的一方）、被告（未支付抚养费的一方）的身份信息，写明诉讼请求（索要抚养费的具体金额及支付方式等）和事实理由。
提交材料：向被告住所地或常居地等有管辖权的法院提交起诉状及相关证据材料。法院受理后会安排开庭。
开庭审理：在庭审中，您要充分说明诉求和依据，提供证据证明您的主张。法院会根据证据和法律规定，依法判决支付抚养费的数额和方式。
总之，即使离婚协议书丢失，您仍然有权起诉要求抚养费。只要您能够提供充分的证据证明亲子关系、离婚事实以及对方未履行支付抚养费的义务，法院就会依法支持您的诉讼主张。如果您在起诉过程中遇到任何问题或需要进一步的法律帮助，请随时向我咨询。