结论：在您描述的情形下，即便没有监控和证人，且您不承认打人行为，但如果对方伤情鉴定为轻伤骨折，且能证明该伤情与您的行为存在因果关系，您仍可能面临法律责任。以下是从不同角度的详细分析：
一、法律责任的认定
因果关系：
- 法律责任的认定关键在于行为与损害结果之间是否存在因果关系。即便没有直接证据如监控或证人，但如果对方能提供其他间接证据（如医疗记录、现场痕迹、第三方陈述等）来证明其伤情是由您的行为导致的，那么因果关系可能得到认定。
伤情鉴定：
- 对方已经进行了伤情鉴定，并得出轻伤骨折的结论。这一鉴定结果在法律上具有一定的证明力，是认定损害程度的重要依据。
举证责任：
- 在民事纠纷中，通常遵循“谁主张，谁举证”的原则。对方需要证明其伤情是由您的行为导致的，以及该行为与伤情之间的因果关系。然而，如果您否认这一行为，您也需要提供相应的证据来支持您的主张，如不在场证明、无行为能力证明等。
二、可能的法律后果
民事赔偿：
- 如果对方能够证明其伤情是由您的行为导致的，您可能需要承担民事赔偿责任，包括医疗费、误工费、护理费、营养费等。
行政处罚：
- 如果您的行为被认定为违反了《治安管理处罚法》的相关规定，如故意伤害他人身体，您可能面临行政处罚，如罚款、拘留等。
刑事责任：
- 如果对方伤情严重，构成轻伤以上，且您的行为被认定为故意伤害罪，您可能面临刑事责任的追究，包括有期徒刑、拘役或管制等。
三、应对建议
收集证据：
- 尽管您否认打人行为，但建议您尽可能收集能够证明您不在场或无行为能力的证据，如监控录像（如果可能）、证人证言（如果有）、行程记录等。
咨询专业律师：
- 鉴于法律问题的复杂性和专业性，建议您咨询专业律师，以便更全面地了解您的法律权利和义务，以及可能的法律后果。作为专业律师，我可以为您提供详细的法律咨询和辩护服务。
积极应对法律程序：
- 如果对方已经提起诉讼或报警，您需要积极应对法律程序，配合调查，提供证据，并依法行使自己的诉讼权利。
最后，我理解您可能对此事感到困惑和担忧，但请相信法律是公正和客观的。如果您有任何疑问或需要进一步的法律帮助，请直接向我咨询。我会根据您的具体情况，为您提供专业、全面的法律建议。