没签合同但组织工人施工，对拖欠工资确实负有责任。以下从不同角度为你详细分析：
一、法律责任角度
劳动关系建立：根据法律规定，用人单位自用工之日起即与劳动者建立劳动关系，且应当订立书面劳动合同。即便没有签订书面合同，只要存在用工事实，就视为建立了劳动关系。因此，组织工人施工的行为，已经构成了与工人之间的劳动关系。
工资支付义务：用人单位有义务按照劳动合同约定和国家规定，向劳动者及时足额支付劳动报酬。如果拖欠工资，就违反了这一法定义务。
法律后果：对于未签订劳动合同且拖欠工资的行为，用人单位可能面临劳动行政部门的责令限期支付，逾期不支付的，还可能被责令按应付金额百分之五十以上百分之一百以下的标准向劳动者加付赔偿金。
二、实际操作角度
证据收集：尽管没有签订书面合同，但工人可以通过收集其他证据来证明劳动关系的存在，如工资支付凭证、工作证、考勤记录等。这些证据在维权过程中至关重要。
维权途径：工人可以通过协商、劳动仲裁等途径来维护自己的权益。如果协商无果，可以向劳动争议仲裁委员会申请仲裁。对仲裁结果不服的，还可以在法定期限内向人民法院提起诉讼。
组织者责任：作为组织工人施工的一方，如果未能及时足额支付工资，不仅可能面临法律上的处罚，还可能损害自身的信誉和形象，影响未来的业务发展。
三、建议与措施
尽快签订合同：为了避免类似的纠纷，建议尽快与工人签订书面劳动合同，明确双方的权利和义务。
及时支付工资：确保按照合同约定和国家规定，及时足额支付工人的工资，避免拖欠。
建立良好沟通机制：与工人建立良好的沟通机制，及时了解他们的需求和困难，共同解决问题。
举例说明：假设你作为组织者，雇佣了一批工人进行施工，但没有与他们签订书面劳动合同。在施工过程中，由于资金问题，你未能及时支付工人的工资。这时，工人有权通过收集证据（如工资支付记录、考勤记录等）来证明劳动关系的存在，并向劳动争议仲裁委员会申请仲裁，要求你支付拖欠的工资及可能的赔偿金。如果你未能及时履行仲裁裁决，工人还可以向人民法院申请强制执行。
因此，作为组织工人施工的一方，对拖欠工资确实负有责任。建议你尽快与工人签订书面劳动合同，并确保及时足额支付工资，以避免不必要的法律纠纷和损失。如果有任何法律问题，可以直接向我咨询。