在没有合同的情况下于工地摔伤，赔偿责任的归属确实是一个复杂的问题，但不必过于担心，法律对此有明确的规定。以下是我根据您的具体情况给出的详细解答：
首先，明确结论：
赔偿责任的归属需根据具体情况分析，可能涉及劳动关系、劳务关系、承揽关系以及违法转包、分包等情形。您应尽快收集证据，并通过协商、劳动仲裁或民事诉讼等途径来维护自己的权益。
接下来，详细分析：
若存在实际劳动关系：
- 即使没有书面合同，若能证明您与工地所属的建筑施工企业、劳务分包企业等存在实际的劳动关系，并且是在工作时间和工作场所内因工作原因受伤，那么通常可以认定为工伤。
- 确定为工伤后，您有权按照工伤保险待遇的规定获得医疗费用、停工留薪期工资、伤残津贴等赔偿。若用人单位未依法缴纳工伤保险费，则由用人单位支付工伤保险待遇。
若形成劳务关系：
- 若无法认定劳动关系，但能确定您与雇主（如包工头）之间形成劳务关系，那么根据《民法典》的规定，提供劳务一方因劳务受到损害的，双方应根据各自过错承担相应的责任。
- 在这种情况下，雇主一般需对提供劳务者在从事劳务活动过程中遭受的人身损害承担主要赔偿责任。
若形成承揽关系：
- 在某些情况下，您可能与雇主之间形成的是承揽关系而非劳务关系。此时，如果是承揽人在完成工作过程中造成自身损害，定作人通常不承担赔偿责任，但若定作人对定作、指示或者选任有过错，则应当承担相应的责任。
违法转包、分包的连带责任：
- 如果建筑工程存在违法转包、分包情况，发包单位、总承包单位与实际施工人（雇主）可能需对您的损害承担连带赔偿责任。
最后，关于证据收集与法律途径：
- 无论哪种情况，您都应尽快收集相关证据，如现场照片、工友证言、就医记录等，以便在需要时证明自己的主张。
- 您可以通过与雇主协商、申请劳动仲裁或提起民事诉讼等合法途径来维护自己的权益。在协商无果或无法确定赔偿责任主体时，建议及时咨询专业律师或申请法律援助。
希望以上解答能够对您有所帮助。如果您在维权过程中遇到任何困难或疑问，都可以直接向我咨询，我会尽力为您提供专业的法律支持和帮助。