结论：您是否有责任，取决于您与工人之间的法律关系、您是否尽到了安全保障义务以及工人受伤的具体原因等多个因素。以下从不同角度为您详细分析：
一、法律关系角度
如果您与工人之间是雇佣关系：
- 根据《中华人民共和国民法典》的相关规定，雇主对雇员在从事雇佣活动中遭受的人身损害，应当承担赔偿责任。但这里有一个前提，即雇员的受伤是由于雇主未尽到安全保障义务或者存在过错导致的。
- 如果工人是在您场地上装货过程中，因您提供的场地存在安全隐患（如地面湿滑、设备故障等）或者您未提供必要的安全防护措施而摔伤，那么您可能需要承担一定的赔偿责任。
如果您与工人之间是承揽关系：
- 承揽关系中，承揽人（即工人）在完成工作过程中造成自身损害的，定作人（即您）一般不承担赔偿责任。但是，如果定作人对定作、指示或者选任有过失的，应当承担相应的赔偿责任。
- 例如，如果您明知工人没有相应的装货资质或者经验，仍然选择其进行装货，且工人在装货过程中因自身技能不足而摔伤，那么您可能因选任过失而承担一定的赔偿责任。
如果您与工人之间不存在直接的法律关系：
- 如果工人是受他人雇佣或委托来您场地上装货，且您与工人之间不存在直接的雇佣或承揽关系，那么您一般不需要对工人的受伤承担赔偿责任。但是，如果您知道或者应当知道场地存在安全隐患而未采取措施消除，或者未尽到合理的安全提示义务，那么您可能因未尽到安全保障义务而承担一定的补充责任。
二、安全保障义务角度
- 无论您与工人之间存在何种法律关系，您都有义务确保您提供的场地和设备符合安全标准，且不会对工人造成损害。
- 如果工人是在您场地上装货过程中，因您未尽到安全保障义务（如未设置警示标志、未提供安全防护设备等）而摔伤，那么您可能需要承担一定的赔偿责任。
三、工人自身原因角度
- 如果工人的受伤是由于其自身原因（如疏忽大意、违反操作规程等）导致的，且您已经尽到了合理的安全保障义务，那么您一般不需要对工人的受伤承担赔偿责任。
- 但是，如果工人能够证明其受伤是由于您未尽到安全保障义务而导致的，那么您仍然可能需要承担一定的赔偿责任。
建议
- 及时了解情况：首先，您需要了解工人受伤的具体原因和经过，以及您与工人之间的法律关系。
- 收集证据：收集与工人受伤相关的证据，如现场照片、视频、证人证言等，以便在需要时证明您的清白或减轻您的责任。
- 咨询专业律师：由于法律问题复杂多变，且每个案件的具体情况都不同，因此建议您在处理此类问题时咨询专业律师的意见。我可以根据您的具体情况，为您提供更详细的法律建议和帮助。
如有任何疑问或需要进一步的法律帮助，请随时向我咨询。