结论前置：即便没有直接的证据证明自己在工地打过工，也并非完全无法讨薪，可以通过收集其他间接证据、寻求工友帮助、向相关部门投诉以及申请法律援助等多种途径来维护自己的合法权益。
详细分析如下：
收集其他间接证据：
- 工作记录：尽管单位没有考勤记录，但你可以尝试收集其他能证明你在工地工作的记录，如工作证、工作服、工作照片、工作视频等。
- 工资支付记录：如果你曾收到过工资，保留好银行转账记录、收条或工资条等，这些都能作为你曾在工地工作的间接证据。
- 通讯记录：与工地负责人或同事的通讯记录，如短信、微信聊天记录等，也可能包含有关你工作的信息。
寻求工友帮助：
- 证人证言：联系当时一起在工地工作的工友，请求他们提供证人证言，证明你曾在工地工作。工友的证言在法律上具有一定的证明力。
- 联合行动：如果有多名工友都面临同样的问题，可以考虑联合起来，共同向单位讨薪，这样会增加讨薪的成功率。
向相关部门投诉：
- 劳动监察部门：向当地的劳动监察部门投诉，说明你的情况，并提供你所能收集到的所有证据。劳动监察部门有权对单位进行调查，并要求单位支付拖欠的工资。
- 工会组织：如果你加入了工会，也可以向工会组织寻求帮助，工会组织会为你提供法律支持和协助讨薪。
申请法律援助：
- 法律援助机构：如果你经济困难，无法承担律师费用，可以向当地的法律援助机构申请法律援助。法律援助机构会为你指派律师，帮助你讨薪。
- 律师协助：在律师的协助下，你可以更有效地收集证据、准备诉讼材料，并提起诉讼或申请仲裁，以维护自己的合法权益。
后续行动建议：
- 在采取上述措施的同时，保持与单位的沟通，尝试通过协商解决问题。如果单位愿意支付拖欠的工资，可以签订书面协议，明确支付时间和金额。
- 如果协商无果，不要放弃维权。及时向相关部门投诉或申请法律援助，坚持维护自己的合法权益。
法律后果提示：
- 根据《中华人民共和国劳动法》和相关规定，用人单位必须按时足额支付劳动者工资。如果用人单位拖欠工资，劳动者有权要求用人单位支付拖欠的工资，并可能获得相应的经济补偿。
- 如果用人单位拒不支付工资，劳动者可以通过法律途径追究用人单位的法律责任，包括提起诉讼或申请仲裁等。
在处理此类问题时，请保持冷静和理性，依法维护自己的权益。如果你有任何疑问或需要进一步的帮助，请直接向我咨询，我会尽我所能为你提供专业的法律支持。