结论：在您描述的情况下，即“没有安排干活，来工地没事摔伤”的责任归属，主要取决于摔伤的原因、工地的管理责任以及是否存在第三方过错等因素。以下是从不同角度进行的分析：

1. 如果摔伤是由于工地存在安全隐患导致的：

   • 法律背景：根据《中华人民共和国安全生产法》等相关法律法规，工地作为生产经营单位，有义务提供安全的工作环境，消除事故隐患。如果工地存在安全隐患，如地面湿滑、未设置警示标志等，导致您摔伤，那么工地应当承担相应的赔偿责任。
   • 建议：在这种情况下，您应尽快收集证据，如现场照片、医疗记录等，以证明摔伤是由于工地的安全隐患导致的。然后，您可以与工地协商赔偿事宜，或者通过法律途径维护自己的权益。

2. 如果摔伤是由于您自身原因导致的：

   • 法律背景：如果摔伤是由于您自身疏忽、不小心或者违反工地安全规定等原因导致的，那么根据过错责任原则，您可能需要自行承担部分或全部责任。
   • 建议：在这种情况下，您应反思自己的行为，并考虑是否有可能通过协商或调解与工地达成一定的补偿协议。如果协商无果，且您认为工地也存在一定的管理责任，您可以咨询专业律师，评估是否可以通过法律途径寻求一定的赔偿。

3. 如果摔伤是由于第三方过错导致的：

   • 法律背景：如果摔伤是由于工地上的其他人员（如工友、访客等）的过错导致的，那么根据侵权责任原则，过错方应当承担相应的赔偿责任。
   • 建议：在这种情况下，您应尽快确定过错方，并收集相关证据，如目击者证言、监控录像等。然后，您可以与过错方协商赔偿事宜，或者通过法律途径追究其责任。

4. 特殊情况：工伤认定：

   • 法律背景：如果您与工地之间存在劳动关系，且摔伤发生在工作时间和工作场所内，或者与工作有关，那么根据《工伤保险条例》的规定，您可能构成工伤。即使摔伤时您并未被安排具体工作，只要符合工伤认定的条件，您仍然有权享受工伤保险待遇。
   • 建议：在这种情况下，您应尽快向工地报告摔伤情况，并要求工地协助您进行工伤认定申请。如果工地拒绝或拖延处理，您可以自行向当地社会保险行政部门提出工伤认定申请，并咨询专业律师以维护自己的权益。

进一步思考：在处理此类纠纷时，证据的收集和保存至关重要。您应尽快拍摄现场照片、保存医疗记录、收集目击者证言等，以证明摔伤的原因和责任归属。同时，您也可以咨询专业律师，了解具体的法律程序和维权策略。

最后：如果您在处理此类纠纷时遇到任何困难或疑问，可以直接向我咨询。作为专注于经济纠纷、劳动纠纷领域的专业律师，我将竭诚为您提供法律帮助和支持。