结论：在离婚协议书约定房子归女方，但女方不还房贷的情况下，男方通常可以起诉，但具体处理方式需根据实际情况判断。以下从不同角度进行分析：

一、从合同（离婚协议）角度分析

1. 离婚协议的效力：离婚协议是双方在平等、自愿的基础上，就离婚相关事宜达成的协议，具有法律约束力。若协议中明确约定房子归女方，且女方负责偿还房贷，那么该约定对双方均具有法律约束力。
2. 违约责任：若女方未按照协议约定偿还房贷，构成违约。男方有权依据离婚协议，要求女方承担违约责任，包括但不限于继续履行还款义务、赔偿因违约造成的损失等。
3. 起诉依据：男方可以以离婚协议为证据，向法院提起诉讼，要求女方履行还款义务或承担违约责任。法院在审理此类案件时，会审查离婚协议的真实性、合法性以及双方的实际履行情况，并据此作出判决。

二、从房贷债务角度分析

1. 房贷债务的性质：房贷债务通常属于夫妻共同债务（除非能证明该债务为一方个人债务），即使离婚协议中约定房子归女方，但房贷债务可能仍需双方共同承担（具体需看贷款合同及银行政策）。然而，若离婚协议中明确约定房贷由女方单独偿还，且该约定不违反法律法规的强制性规定，那么该约定对双方具有法律约束力。
2. 银行追偿权：若女方未偿还房贷，银行有权向男方追偿（若男方为共同借款人或担保人）。在此情况下，男方在偿还银行贷款后，有权依据离婚协议向女方追偿。
3. 起诉策略：男方可以先与银行沟通，了解房贷的偿还情况，并保留相关证据。若银行已向男方追偿，男方在偿还贷款后，可以以离婚协议和银行还款凭证为证据，向法院提起诉讼，要求女方返还男方代为偿还的贷款及相应利息。

三、实际操作建议

1. 收集证据：男方应收集离婚协议、房贷合同、银行还款记录等相关证据，以证明女方的违约行为和男方的损失。
2. 协商解决：在起诉前，男方可以尝试与女方协商解决，要求女方履行还款义务或达成新的还款协议。
3. 提起诉讼：若协商无果，男方可以向法院提起诉讼，要求女方履行还款义务或承担违约责任。在诉讼过程中，男方应积极配合法院的审理工作，提供必要的证据和材料。

后续行动建议：若您面临此类情况，建议先与女方沟通协商，若无法达成一致，再考虑通过法律途径解决。同时，请注意保留好相关证据，以便在需要时提供证明。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。