在我国法律体系中，通常只能由违法行为地管辖的案件主要包括涉及卖淫、嫖娼、赌博以及毒品的案件。以下是对这一结论的详细解释和分析：

1. 地域管辖原则的一般规定：

   • 行政案件一般由违法行为地的公安机关管辖。这是基于案件发生地与违法行为之间的直接联系，便于公安机关及时、有效地进行调查取证和后续处理。

2. 例外情况的明确规定：

   • 然而，对于涉及卖淫、嫖娼、赌博以及毒品的案件，法律通常规定只能由违法行为地的公安机关管辖。这些案件因其特殊性，如涉及社会道德风尚、公共安全等，需要由违法行为发生地的公安机关进行专门处理，以确保执法的准确性和有效性。
   • 具体来说：
     • 卖淫、嫖娼案件：这些行为严重违反社会道德和法律法规，对公共秩序和社会风气造成不良影响。由违法行为地公安机关管辖，可以确保及时制止违法行为，保护社会公共利益。
     • 赌博案件：赌博行为不仅违反法律法规，还容易引发一系列社会问题，如家庭破裂、债务纠纷等。由违法行为地公安机关管辖，可以迅速打击赌博活动，维护社会稳定。
     • 毒品案件：毒品犯罪是严重的刑事犯罪，对个人健康和社会安全构成极大威胁。由违法行为地公安机关管辖，可以确保及时查获毒品，打击毒品犯罪链条，保护人民群众的生命财产安全。

3. 其他案件的管辖灵活性：

   • 除了上述例外情况外，对于其他行政案件，如果由违法行为人居住地公安机关管辖更为适宜（如考虑调查取证便利性、后续执行等因素），也可以由其管辖。这体现了法律对管辖权的灵活处理，以适应不同案件的具体情况。

4. 实践中的操作指南：

   • 在实际操作中，公安机关会根据案件的具体情况和法律规定来确定管辖权。对于涉及复杂管辖权争议的案件，公安机关会依法进行协商或报请上级公安机关指定管辖。
   • 当事人对管辖权有异议的，可以依法向有关机关提出申诉或复议。这确保了当事人对管辖权的合法权益得到保障。

总结与建议：

• 对于只能由违法行为地管辖的案件，主要是涉及卖淫、嫖娼、赌博以及毒品的案件。这些案件因其特殊性，需要由违法行为发生地的公安机关进行专门处理。
• 在实际操作中，如果当事人对管辖权有异议或认为由居住地公安机关管辖更为适宜，可以依法向有关机关提出申诉或复议。同时，也可以咨询专业律师（如我，裴育律师，专注于公司事务、经济纠纷、合同纠纷、行政纠纷、拆迁安置领域）以获取更具体的法律建议和帮助。

如有任何法律疑问或需要进一步的法律咨询，请随时向我提问。