结论：女方能否向对方要回款项，需视具体情况而定，主要取决于款项的性质、用途以及男方行为是否构成表见代理等因素。以下从不同角度进行分析。
一、款项性质与用途
若款项被用于非法活动：
- 如果男方将女方信用卡贷款所得款项用于非法活动（如赌博、贩毒等），则该借贷关系可能因违反法律强制性规定而无效。
- 在此情况下，女方不仅有权向男方追偿，还有权向实际使用款项的第三方主张返还，但需注意，由于款项已用于非法活动，实际追回的可能性可能较小，且可能涉及法律风险。
若款项被用于合法但未经女方同意的用途：
- 如果男方未经女方同意，擅自将女方信用卡贷款所得款项用于合法但非共同生活的用途（如借给朋友、投资等），则男方的行为构成无权处分。
- 女方作为信用卡的合法持有人，有权要求男方返还因无权处分而造成的损失，即贷款本金及可能产生的利息、费用等。
- 对于实际使用款项的第三方，如果其明知或应知男方无权处分而仍然接受款项，则可能构成不当得利，女方有权要求其返还。但若第三方是善意的，且已合理支付对价，则女方可能难以直接向其主张返还。
二、表见代理的认定
- 表见代理的定义：表见代理是指行为人没有代理权、超越代理权或者代理权终止后，仍然实施代理行为，相对人有理由相信行为人有代理权的，代理行为有效。
- 在本案中的应用：如果男方在贷款过程中，使用了女方的身份信息、信用卡等，且第三方有理由相信男方有权代表女方进行贷款（如男方持有女方的授权委托书、共同生活期间男方经常处理家庭财务等），则可能构成表见代理。
- 法律后果：如果构成表见代理，则女方需承担贷款的法律后果，即需偿还贷款本金及利息等。但女方在承担责任后，有权向男方追偿因男方无权代理而造成的损失。
三、法律建议与操作步骤
收集证据：
- 女方应尽快收集相关证据，包括贷款合同、信用卡交易记录、男方与第三方的沟通记录等，以证明男方未经同意擅自贷款及款项用途。
与男方协商：
- 女方可以尝试与男方协商，要求其返还贷款本金及可能产生的利息、费用等。如果男方同意返还，则可以签订书面协议并履行。
向第三方主张权利：
- 如果第三方明知或应知男方无权处分而仍然接受款项，女方可以尝试向其主张返还。但需注意，这可能需要通过法律途径解决，且存在一定难度。
寻求法律帮助：
- 如果协商无果或第三方拒绝返还，女方应寻求专业律师的帮助，通过法律途径维护自己的合法权益。律师可以根据具体情况，制定合适的诉讼策略，并代表女方进行诉讼。
后续思考：在处理此类问题时，女方应尽快采取行动，收集证据并寻求法律帮助。同时，女方也应加强对自己信用卡等财务信息的管理，防止类似事件再次发生。如果有任何疑问或需要进一步的法律帮助，可以直接向我咨询。