一般情况下，曾经与卖淫女有过嫖娼行为的嫖客，不会因卖淫女被抓而直接受牵连被追究刑事责任，但可能会面临行政处罚；不过，若存在组织、强迫、引诱、容留、介绍卖淫等特定情形，则可能面临刑事处罚。以下从不同情况为你详细分析：
单纯嫖娼行为
- 法律定性：嫖娼在我国属于违反治安管理的行为，而非犯罪行为。根据《中华人民共和国治安管理处罚法》第六十六条规定，卖淫、嫖娼的，处十日以上十五日以下拘留，可以并处五千元以下罚款；情节较轻的，处五日以下拘留或者五百元以下罚款。
- 是否受牵连：如果卖淫女被抓后，警方在调查过程中发现嫖客的嫖娼行为，且该行为未超过治安管理处罚法规定的追究时效（六个月），那么嫖客可能会被警方传唤接受调查，并可能面临上述行政处罚。但这种处罚是基于嫖客自身的违法行为，而非因为卖淫女被抓而“受牵连”。如果嫖娼行为已经超过六个月，根据法律规定，将不再给予处罚。
存在其他严重情节
- 法律定性：如果嫖客不仅存在嫖娼行为，还涉及组织、强迫、引诱、容留、介绍卖淫等行为，那么这些行为可能构成犯罪。例如，根据《中华人民共和国刑法》第三百五十八条规定，组织、强迫他人卖淫的，处五年以上十年以下有期徒刑，并处罚金；情节严重的，处十年以上有期徒刑或者无期徒刑，并处罚金或者没收财产。引诱、容留、介绍他人卖淫的，处五年以下有期徒刑、拘役或者管制，并处罚金；情节严重的，处五年以上有期徒刑，并处罚金。
- 是否受牵连：在这种情况下，如果卖淫女被抓并供出嫖客存在上述犯罪行为，或者警方在调查过程中发现嫖客有相关犯罪线索，那么嫖客将可能面临刑事追究。此时，嫖客不是因为单纯的嫖娼行为受牵连，而是因为其自身存在的犯罪行为。
特殊情况说明
如果嫖客在嫖娼过程中，明知卖淫女是未成年人、患有严重性病等情况，仍然与其发生性关系，那么这种行为可能构成更严重的犯罪，如嫖宿幼女罪（虽已废止，但相关行为可能以强奸罪论处）、传播性病罪等。在这种情况下，嫖客也将面临严厉的刑事处罚。
建议：无论何种情况，嫖娼行为都是不被法律所允许的，不仅可能面临行政处罚，还可能引发一系列社会问题和个人风险。因此，建议你遵守法律法规，远离任何违法活动。如果你有任何法律问题或疑虑，可以直接向我咨询，我会为你提供专业的法律建议。