结论：在您描述的情况下，工地是否有责任需根据具体情况判断，主要看是否构成工伤以及工地是否存在过错。以下从不同角度为您详细分析：
一、是否构成工伤
根据《工伤保险条例》的相关规定，职工在上下班途中，受到非本人主要责任的交通事故或者城市轨道交通、客运轮渡、火车事故伤害的，应当认定为工伤。在您的情况中：
事故发生时间与地点：若您是在前往工地的途中发生事故，且该路线是您日常上下班的合理路线，那么有可能符合“上下班途中”的条件。
事故责任认定：关键在于事故责任是否由您承担主要责任。若您开车撞到电线杆是由于自身疏忽或违规驾驶导致，且您承担事故的主要或全部责任，那么可能不构成工伤。反之，若电线杆的设置存在安全隐患（如位置不当、缺乏警示标志等），且该隐患是导致事故发生的重要原因，那么您可能不承担主要责任，从而有可能构成工伤。
人员受伤情况：车内人员受伤是否属于工伤，还需看他们与您的劳动关系以及是否在上下班途中。若他们是您的同事，且同样在上下班途中，那么他们的受伤情况也可能适用工伤认定。
二、工地是否有责任
若构成工伤：若事故被认定为工伤，那么根据《工伤保险条例》，用人单位（即工地）应承担工伤保险责任，包括支付工伤医疗费用、伤残津贴等。此外，若工地存在过错（如未提供安全的上下班路线、未设置必要的警示标志等），还可能需承担额外的民事赔偿责任。
若不构成工伤：若事故不被认定为工伤，那么工地是否有责任需根据具体情况判断。若工地存在过错（如电线杆设置不当、未及时清理障碍物等），且该过错是导致事故发生的原因之一，那么工地可能需承担一定的民事赔偿责任。若工地无过错，则可能无需承担责任。
三、建议与措施
及时报警并保留证据：事故发生后，应立即报警并保留好相关证据（如事故现场照片、交警出具的事故责任认定书等），以便后续维权。
申请工伤认定：若符合工伤认定条件，应及时向用人单位所在地的社会保险行政部门提出工伤认定申请。
咨询专业律师：由于工伤认定和赔偿涉及复杂的法律程序和专业知识，建议您咨询专业律师以获取更详细的法律建议和帮助。
最后，每个案件的具体情况都有所不同，以上分析仅供参考。若您有进一步的法律问题或需要更具体的法律建议，请直接向我咨询。