结论：对方连续骂人，您打了对方一巴掌但够不上轻微伤，若对方不调解，您是否会被拘留取决于具体案情及公安机关的裁量。尽管行为可能构成侵犯他人身体权利，但并非必然导致拘留。
法律分析：
法律依据：
- 根据《中华人民共和国治安管理处罚法》第四十三条，殴打他人或故意伤害他人身体，可处五日以上十日以下拘留，并处二百元以上五百元以下罚款；情节较轻的，处五日以下拘留或者五百元以下罚款。这表明，即便未造成明显伤害，打人行为本身也可能受到法律制裁。
实际执法考量：
- 公安机关在处理此类案件时，会综合考虑多方面因素，包括行为人的主观恶意与动机、行为的严重程度与后果、是否存在实际伤害及伤害的轻重、双方当事人的态度与是否愿意调解，以及行为人是否有前科或多次类似行为等。
可能的处理结果：
- 调解优先：若双方当事人能达成调解协议并履行，公安机关可能会不予治安处罚，鼓励和解。在此情况下，您可能不会面临拘留。
- 非拘留处罚：对于情节较轻、未造成实际伤害，且您态度良好的情况，公安机关可能选择警告、罚款等非拘留措施。
- 拘留处罚：若您的打人行为情节恶劣，如存在明显的恶意、多次骚扰或攻击，或伴有其他加重处罚的情节（如针对特定对象如老人、儿童、残疾人等实施），即使未造成明显伤害，您也可能面临拘留等更严厉的行政处罚。
民事责任：
- 此外，被打者若选择通过民事诉讼追究您的责任，您还可能需承担赔偿医疗费、误工费等民事责任。尽管未造成明显伤害，但对方可能因情绪受影响或就医等产生合理支出，这些费用您可能需要承担。
建议：
- 保持冷静与克制：在面对对方连续骂人的情况下，保持冷静与克制，避免采取过激行为，以免加重法律后果。
- 积极寻求调解：尝试与对方进行沟通，寻求和解或调解，以减轻法律后果并维护和谐的社会关系。
- 了解法律程序：若无法达成调解，应尊重法律程序，配合公安机关的调查处理，并根据实际情况承担相应的法律责任和民事责任。
- 咨询专业律师：如有需要，您可以向我咨询，我会根据您的具体情况提供更详细的法律建议和帮助。
综上所述，对方连续骂人，您打了对方一巴掌但够不上轻微伤，若对方不调解，您是否会被拘留是一个复杂的法律问题，需根据具体案情和法律规定来判断。在处理此类情况时，请保持冷静，积极寻求法律帮助，以维护自身合法权益。