结论：打人者完全可以拒绝调解，这是其法定权利。但拒绝调解后，案件将依法进入行政或司法程序，打人者可能面临行政处罚、刑事责任追究及民事赔偿等法律后果。以下从多个角度详细分析：
一、打人者拒绝调解的法律依据
根据《中华人民共和国人民调解法》第十八条及《公安机关办理行政案件程序规定》第一百七十八条，当事人有权拒绝调解或要求终止调解。调解需基于双方自愿，任何一方不同意调解的，公安机关不得强制调解，而应依法处理案件。
二、拒绝调解后的法律程序
行政处罚程序
- 若伤情鉴定为轻微伤，公安机关将依据《治安管理处罚法》第四十三条对打人者作出行政处罚，包括：
- 警告：适用于情节轻微的情况。
- 罚款：处二百元以上五百元以下罚款；情节较轻的，处五百元以下罚款。
- 行政拘留：处五日以上十日以下拘留；情节较轻的，处五日以下拘留。
- 示例：若打人者因琐事殴打他人，未造成严重后果，可能被处以五日拘留并罚款三百元。
刑事责任追究程序
- 若伤情鉴定为轻伤及以上，公安机关将立案侦查，打人者可能涉嫌故意伤害罪。根据《刑法》第二百三十四条：
- 轻伤：处三年以下有期徒刑、拘役或管制。
- 重伤：处三年以上十年以下有期徒刑。
- 致人死亡或以特别残忍手段致人重伤造成严重残疾：处十年以上有期徒刑、无期徒刑或死刑。
- 示例：若打人者持械致人轻伤，可能被判处一年有期徒刑。
民事赔偿程序
- 无论是否接受调解，受害人均有权要求打人者承担民事赔偿责任，包括医疗费、误工费、护理费等。赔偿范围以实际损失为限，需提供医院诊断证明、医疗费发票等证据。
- 示例：若受害人因伤住院治疗，产生医疗费2万元、误工费5千元，打人者需全额赔偿。
三、拒绝调解后的权利救济途径
对行政处罚不服的救济
- 打人者可在收到处罚决定书之日起六十日内向上一级公安机关或同级人民政府申请行政复议，或在六个月内直接向人民法院提起行政诉讼。
- 示例：若打人者认为处罚过重，可申请行政复议要求减轻处罚。
对刑事处理不服的救济
- 若打人者被刑事拘留或逮捕，其家属或辩护人可申请取保候审或提出无罪、罪轻的辩护意见。
- 示例：若打人者主张正当防卫，需提供证据证明其行为符合防卫条件。
四、法律建议
- 理性评估后果：拒绝调解前，打人者应充分了解可能面临的行政处罚、刑事责任及民事赔偿，权衡利弊后作出决定。
- 积极配合调查：无论是否接受调解，均应如实陈述事实，配合公安机关调查，避免因逃避调查导致处罚加重。
- 咨询专业律师：若对法律程序或后果存在疑问，可随时向我咨询，我将根据具体案情提供针对性建议。
总结：拒绝调解是打人者的法定权利，但需承担由此引发的法律后果。建议根据案件具体情况，理性选择是否接受调解，并依法维护自身权益。如有进一步疑问，可直接向我咨询。