核心结论：打人者拘留后出来直接回家，这一行为本身并不一定违法，但需结合具体情况判断后续是否需要承担其他法律责任或是否会面临进一步处理。

具体情况分析：

• 拘留性质与期限：首先需明确打人者被拘留的性质（行政拘留或刑事拘留）及期限。行政拘留通常针对轻微违法行为，期限较短（一般不超过15日），执行完毕后即释放，释放后直接回家是正常程序。若为刑事拘留，则可能涉及刑事案件，后续可能面临逮捕、起诉等程序。但即便刑事拘留后释放（如因证据不足、不构成犯罪等），直接回家也是可能的，这并不代表完全无事，只是当前阶段不继续羁押。
• 是否构成犯罪：若打人行为构成犯罪（如故意伤害罪），即使拘留后释放，案件仍会继续侦查、审查起诉和审判。释放可能是取保候审或监视居住等强制措施，此时需遵守相关规定（如不得离开居住地、随传随到等）。若违反规定，可能被重新拘留或逮捕。
• 民事赔偿问题：无论是否构成犯罪，打人者均可能需承担民事赔偿责任（如医疗费、误工费等）。若拘留后未解决民事赔偿问题，受害者可通过民事诉讼途径追偿。

建议与行动：

• 受害者角度：若您是受害者，首先应确认打人者被拘留的性质及案件进展。若认为打人者应承担刑事责任，可向公安机关或检察机关了解案件情况，必要时申请立案监督。同时，注意收集、保存相关证据（如医疗记录、证人证言等），以便后续民事诉讼或刑事附带民事诉讼使用。
• 打人者角度：若您是打人者或其家属，应了解拘留性质及后续可能面临的法律责任。若已释放，需遵守相关法律规定（如取保候审期间的义务），并积极与受害者协商民事赔偿事宜，以减少后续纠纷。
• 共同建议：无论哪方，均可咨询专业律师以获取更具体的法律建议。律师可根据案件具体情况，提供针对性的法律策略和帮助。

注意事项：法律程序具有复杂性和专业性，不同案件情况差异较大。因此，在处理此类问题时，务必保持冷静、理性，并寻求专业法律支持。