结论：双方打架在场人拒绝举证本身并不直接构成违法，但在特定情况下，如证人被依法传唤或法院认为其证言对案件有重大影响时，拒绝作证可能会面临法律责任。
详细分析：
一般情况下的拒绝举证：
- 在日常生活中，如果双方发生打架事件，在场人作为目击者，虽然他们的证言可能对查明事实真相有帮助，但法律并未强制要求他们必须作证。因此，一般情况下，在场人拒绝举证并不构成违法。
特定情况下的拒绝作证：
- 证人被依法传唤：如果证人被公安机关、人民检察院或人民法院依法传唤，要求其出庭作证，而证人无正当理由拒绝出庭或拒绝作证，那么根据《中华人民共和国刑事诉讼法》的相关规定，证人可能会面临被强制到庭、罚款甚至拘留等法律后果。虽然这些规定主要针对刑事诉讼中的证人，但在民事诉讼中，如果证人被法院依法传唤而拒绝作证，也可能面临类似的法律责任，尽管具体措施可能有所不同。
- 证言对案件有重大影响：如果在场人的证言对案件的判决结果有重大影响，而他们拒绝提供证言，这可能会影响案件的公正审理。在这种情况下，法院可能会采取更积极的措施来促使证人作证，包括但不限于发出传票、罚款或采取其他强制措施。
道德层面的考量：
- 除了法律层面的责任外，从道德层面来看，作为目击者，提供真实的证言是每个人的社会责任。拒绝作证可能会阻碍司法公正，影响案件的公正处理。因此，即使法律没有强制要求作证，从道德和社会责任的角度出发，目击者也应该尽可能提供真实的证言。
建议：
- 如果你是打架事件的目击者，且被要求提供证言，建议你根据实际情况和法律规定来决定是否作证。如果你认为作证可能会对自己或他人造成不利影响，或者你有其他合理的理由拒绝作证，你可以与要求你作证的相关机构或个人进行沟通，说明你的情况和理由。
- 如果你对是否应该作证存在疑问或担忧，建议你咨询专业的法律人士，如律师或法律顾问，以获取更具体的法律建议和指导。
后续行动：
- 如果你作为目击者被要求作证，且你决定提供证言，请确保你的证言真实、准确、完整，不要隐瞒或歪曲事实。
- 如果你拒绝作证，且因此面临法律责任或纠纷，请及时寻求法律帮助，以维护自己的合法权益。
如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。