结论：男方通常无权直接将女方赶出租赁的房屋，但具体还需根据实际情况和法律规定来判断。以下从多个角度进行分析：

1. 合同相对性原则：

   • 租赁合同是出租人与承租人之间设立、变更、终止租赁关系的协议。在此案例中，合同上写的是女方的名字，意味着女方是法律上的承租人。
   • 根据合同的相对性原则，合同的权利和义务主要约束合同双方，即出租人和女方。男方并非合同当事人，因此，他通常不直接享有合同上的权利，如驱赶承租人。

2. 共同居住权与实际使用情况：

   • 尽管男方不是合同上的承租人，但如果他实际与女方共同居住在租赁的房屋内，且双方有共同居住的约定或习惯，那么男方可能享有一定的居住权。
   • 然而，这种居住权并不等同于所有权或租赁权，它通常受到租赁合同、物权法以及双方之间具体约定的限制。在分手后，如果双方没有达成新的协议，男方继续居住可能会引发争议。

3. 法律程序与救济途径：

   • 如果男方试图强行将女方赶出房屋，这可能构成侵权行为，女方有权向公安机关报案或向人民法院提起诉讼，要求男方停止侵害、恢复原状或赔偿损失。
   • 同时，如果女方希望男方离开房屋，她也应该通过合法途径解决，如与男方协商、寻求调解或提起诉讼等，而不是采取非法手段。

4. 特殊情况考虑：

   • 如果租赁合同中有特别约定，比如允许男方在特定条件下居住或驱赶承租人，那么这些约定将优先适用。
   • 另外，如果男方能够证明他对房屋有合法的权益（如实际支付了租金、对房屋进行了装修等），他可能在一定程度上享有保护自己权益的权利。但这并不意味着他可以直接将女方赶出房屋。

建议：

• 在这种情况下，双方最好通过协商来解决问题，以避免不必要的法律纠纷和损失。
• 如果协商不成，可以考虑寻求第三方调解或提起诉讼来维护自己的合法权益。
• 无论采取哪种方式，都应该确保自己的行为符合法律规定和道德准则。

如果您有进一步的法律问题或需要更详细的法律建议，请直接向我咨询，我会根据您的具体情况提供专业的法律帮助。