建设单位并非只对实际施工人承担责任，而不对施工单位负责。建设单位与施工单位、实际施工人之间的责任关系需根据具体情况和法律规定来综合判断。以下从几个角度进行详细分析：

1. 建设单位与施工单位之间的合同关系：

   • 建设单位与施工单位之间通常签订有建设工程施工合同，这是双方权利义务的基础。根据合同法的相关规定（现《民法典》合同编），合同双方应当按照约定履行自己的义务，包括但不限于支付工程款、提供施工条件等。
   • 如果建设单位未按照合同约定履行义务，如未按时支付工程款，施工单位有权要求建设单位承担违约责任，包括但不限于支付违约金、赔偿损失等。

2. 实际施工人的法律地位：

   • 实际施工人通常指的是与施工单位签订分包合同或转包合同，并实际进行施工的个人或组织。在建设工程领域，实际施工人的权益保护是一个重要问题。
   • 根据相关法律法规和司法解释，实际施工人在特定情况下有权直接向建设单位主张工程款，但这并不意味着建设单位只对实际施工人承担责任。这种权利通常是在施工单位无法履行支付义务或存在其他特定情形时，为保护实际施工人的合法权益而设立的。

3. 建设单位、施工单位与实际施工人之间的责任划分：

   • 在正常情况下，建设单位应按照合同约定向施工单位支付工程款，施工单位则负责按照合同约定完成施工任务，并向实际施工人支付相应的款项。
   • 如果建设单位未支付工程款给施工单位，导致施工单位无法支付给实际施工人，实际施工人可以依据相关法律法规和司法解释，在特定条件下直接向建设单位主张权利。但这并不改变建设单位与施工单位之间的合同关系，也不意味着建设单位只对实际施工人负责。
   • 实际上，建设单位、施工单位和实际施工人之间的责任关系是相互交织的。建设单位需对施工单位履行合同义务，施工单位则需对实际施工人履行支付义务。当任何一方未履行其义务时，都可能引发相应的法律责任。

4. 特殊情况下的责任承担：

   • 在某些特殊情况下，如施工单位破产、失踪或丧失履行能力等，实际施工人可能面临无法获得工程款的风险。此时，根据相关法律法规和司法解释，实际施工人可以突破合同相对性原则，直接向建设单位主张工程款。但这并不改变建设单位与施工单位之间的基本责任关系。

建议：

• 对于建设单位而言，应严格按照合同约定履行义务，确保工程款的及时支付，以避免引发不必要的法律纠纷。
• 对于施工单位而言，应加强与实际施工人的合同管理，确保款项的及时支付，并维护好与建设单位的合作关系。
• 对于实际施工人而言，在签订合同时应明确约定款项支付方式、时间等关键条款，并在必要时寻求法律援助以维护自身权益。

如有任何疑问或需要进一步的法律帮助，请直接向我咨询。