打人者如果拒绝赔偿，确实会面临处罚，这主要包括民事责任、行政处罚以及可能的刑事责任。下面我将从这几个方面详细解释：
民事责任：
- 赔偿范围：受害者有权要求打人者赔偿因打人行为造成的所有合理损失，这包括但不限于医疗费、误工费、护理费、交通费、住宿费、营养费等。如果打人行为导致了残疾或死亡，打人者还需赔偿辅助器具费、残疾赔偿金、丧葬费和死亡赔偿金等。
- 诉讼与强制执行：若打人者拒绝赔偿，受害者可以向人民法院提起民事诉讼。法院判决后，若打人者仍拒不履行赔偿义务，受害者可申请强制执行。法院有权采取多种强制措施，如查询、冻结、划拨存款，查封、扣押、拍卖、变卖财产等，以确保赔偿款得到执行。
- 信用影响：长期拒绝赔偿且有能力执行而拒不执行的打人者，将被列入失信被执行人名单，这将对个人信用和日常生活产生严重影响。
行政处罚：
- 如果打人行为违反了《治安管理处罚法》，公安机关有权对打人者进行行政处罚，这包括警告、罚款、拘留等。这些处罚是对打人行为的直接制裁，与是否赔偿无关。即使打人者愿意赔偿，如果其行为构成了违反治安管理的行为，仍然可能受到行政处罚。
刑事责任：
- 量刑考虑：如果打人行为构成刑事犯罪，如故意伤害罪，积极赔偿并取得被害人谅解是酌定从轻情节。拒绝赔偿则可能导致法院在量刑时不考虑这一从轻因素，从而判处相对较重的刑罚。
- 拒不执行判决、裁定罪：在法院判决打人者赔偿后，若其有能力执行却拒绝执行，且情节严重的，可能构成拒不执行判决、裁定罪。根据《刑法》的相关规定，犯此罪的，处三年以下有期徒刑、拘役或者罚金；情节特别严重的，处三年以上七年以下有期徒刑，并处罚金。
建议：
- 对于打人者而言，拒绝赔偿不仅无法逃避法律责任，反而可能面临更严重的法律后果。因此，建议打人者在事后应积极与受害者协商赔偿事宜，以减轻可能的法律责任。
- 对于受害者而言，如果遭遇打人事件且对方拒绝赔偿，应依法采取措施维护自己的合法权益。这包括报警、进行伤情鉴定、提起民事诉讼以及申请强制执行等。
示例说明：
假设张三因琐事与李四发生争执，并动手打了李四，导致李四受伤住院。事后，张三拒绝赔偿李四的医疗费等损失。在这种情况下，李四可以向人民法院提起民事诉讼，要求张三赔偿相关损失。如果法院判决张三赔偿而张三拒不履行，李四可以申请强制执行。同时，如果张三的行为构成了违反治安管理的行为或刑事犯罪，公安机关或检察机关还将依法对其进行行政处罚或刑事追究。
总之，打人者拒绝赔偿将面临严峻的法律后果。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。