如果打人致骨折且拒绝赔偿，公安和法院将会根据具体情况进行一系列处理。

首先，从刑事角度来看，故意伤害他人身体导致骨折构成了故意伤害罪。这一罪行的严重程度会依据受害者的伤情来判断。一般来说，如果骨折被认定为轻伤，犯罪者可能会面临三年以下有期徒刑、拘役或者管制。若骨折情况严重，被认定为重伤，那么可能会处三年以上十年以下有期徒刑。在极端情况下，如果导致人死亡或以特别残忍手段致人重伤造成严重残疾，可能会面临十年以上有期徒刑、无期徒刑甚至死刑。

其次，即使犯罪者不主动赔偿，民事赔偿责任并不会因此免除。受害者有权通过附带民事诉讼来要求打人者赔偿医疗费、护理费、误工费以及残疾赔偿金等各项损失。这意味着，即便打人者当前没有能力赔偿，一旦其日后有了财产，受害者仍然可以申请强制执行来获取应有的赔偿。

综上所述，如果打人致骨折且拒绝赔偿，不仅可能面临严厉的刑事处罚，还可能承担长期的民事赔偿责任。因此，建议在与他人发生冲突时，务必保持冷静，避免采取暴力手段，以免给自己和他人带来无法挽回的后果。如果不幸发生此类事件，建议及时咨询专业律师，以便更好地了解自己的权利和义务。