第三者借给男方的钱，一般不能直接起诉男方的配偶要回。以下从不同角度为您详细分析：
一、法律关系角度
借款合同的相对性：
- 根据合同法的原理，借款合同具有相对性，即合同的权利义务仅约束合同双方当事人。第三者借给男方的钱，形成的借款合同关系仅存在于第三者和男方之间。因此，第三者只能向男方主张还款，而不能直接向男方的配偶主张。
夫妻共同债务的认定：
- 夫妻共同债务是指夫妻双方共同签名或者夫妻一方事后追认等共同意思表示所负的债务，以及夫妻一方在婚姻关系存续期间以个人名义为家庭日常生活需要所负的债务。如果第三者借给男方的钱并未用于夫妻共同生活或共同经营，且男方的配偶并未在借款合同上签字或事后追认，那么这笔债务通常不被认定为夫妻共同债务。因此，第三者不能直接起诉男方的配偶要求还款。
二、实际操作角度
起诉对象的确定：
- 在实际操作中，第三者如果希望追回借款，应当首先确定正确的起诉对象。由于借款合同关系仅存在于第三者和男方之间，因此第三者应当起诉男方，而不是男方的配偶。
证据的收集与提供：
- 第三者在起诉男方时，需要收集并提供充分的证据来证明借款事实的存在以及男方未还款的情况。这些证据可能包括借款合同、转账记录、聊天记录等。如果第三者无法提供充分的证据，那么其诉讼请求可能会被法院驳回。
三、特殊情况考虑
恶意串通或欺诈行为：
- 如果存在男方与第三者恶意串通，通过虚构借款事实来损害男方配偶利益的情况，那么男方的配偶可以依法主张该借款合同无效，并拒绝承担还款责任。但这种情况需要男方的配偶提供充分的证据来证明恶意串通或欺诈行为的存在。
借款用途的证明：
- 如果第三者能够证明借款确实用于了夫妻共同生活或共同经营，且男方的配偶对此知情并同意，那么这笔债务可能会被认定为夫妻共同债务。但这种情况需要第三者提供充分的证据来证明借款用途以及男方的配偶的知情和同意。
建议：
- 如果您作为第三者，借给了男方钱并希望追回，建议您首先与男方协商解决。如果协商无果，您可以考虑通过法律途径来维护自己的权益，即起诉男方要求还款。
- 在起诉前，请确保您已经收集并提供了充分的证据来证明借款事实的存在以及男方未还款的情况。
- 如果您对法律程序不熟悉或担心自己的权益无法得到保障，可以寻求专业律师的帮助。
有问题可以直接向我咨询，我会根据您的具体情况提供更详细的法律建议。