可以起诉。离婚协议中约定男方还房贷，如果他不履行这一义务，女方有权向法院提起诉讼。以下是对这一问题的详细分析：
法律效力：离婚协议中关于男方还房贷的约定具有法律效力。一旦双方签字并办理离婚登记手续，该协议即生效，对双方均具有约束力。
违约责任：若男方未按照协议约定偿还房贷，则构成违约。女方可以先尝试与男方协商，明确其还款责任和义务。如果协商无果，女方可以依据离婚协议向法院提起诉讼，要求男方履行还款义务。
诉讼证据：在提起诉讼时，女方需要提供离婚协议书、贷款合同、还款记录等证据，以证明房屋归属及男方未还款的事实。这些证据对于法院认定事实和判决男方还款至关重要。
法院判决与执行：如果法院认定事实清楚、证据确凿，会判决男方履行还款责任。若男方仍不履行，女方可以通过强制执行程序来保障自己的合法权益。
特殊情况：需要注意的是，如果房贷是在婚姻关系存续期间所贷，且用于夫妻共同生活、共同经营，那么即使离婚协议约定由男方还房贷，女方也可能需承担一定的还款责任。但这种情况并不影响女方依据离婚协议向男方主张其应承担的还款义务。
综上所述，如果离婚协议中约定男方还房贷，但他不履行这一义务，女方完全有权向法院提起诉讼来维护自己的合法权益。在提起诉讼前，建议女方先与男方协商，并准备好相关证据以便在诉讼中能够证明自己的主张。