发包方以质量不合格为由主张赔偿，确实通常需要以实际损失为前提，这一点在最高法的相关案例和司法解释中有所体现。以下从几个角度进行详细分析：

一、法律依据与司法解释

根据《最高人民法院关于审理建设工程施工合同纠纷案件适用法律问题的解释》（现为《最高人民法院关于审理建设工程施工合同纠纷案件适用法律问题的解释（一）》）的相关规定，建设工程未经竣工验收，发包人擅自使用后，又以使用部分质量不符合约定为由主张权利的，人民法院不予支持。但这一规定并不意味着发包方在任何情况下都不能以质量不合格为由主张赔偿，而是强调了发包方擅自使用未经竣工验收的工程后，其主张权利将受到一定限制。若发包方能证明实际损失与承包方的施工质量问题存在直接因果关系，且该损失在合理范围内，法院仍可能支持其赔偿请求。

二、案例分析

以某中学与陈某建设工程施工合同纠纷一案为例，该案中发包方某中学在工程未经竣工验收的情况下擅自使用，后以工程质量不合格为由主张赔偿。法院审理认为，虽然工程存在质量问题，但发包方未能证明其在保修期内向承包方主张过维修义务，且工程已过保修期，同时发包方自身存在违法发包、未组织验收等过错，因此驳回了发包方的赔偿请求。这一案例表明，发包方以质量不合格为由主张赔偿，需要证明实际损失的存在，以及该损失与承包方施工质量的直接关联性。

三、实际损失的认定

在实际操作中，发包方主张赔偿时，需要明确并证明其实际损失。这包括但不限于：

1. 修复费用：因工程质量问题导致的修复、加固等费用。
2. 经济损失：如因工程质量问题导致的停工、延误等造成的经济损失。
3. 其他直接损失：如因工程质量问题导致的人身伤害、财产损失等。

发包方需要提供充分的证据来证明这些损失的存在，以及它们与承包方施工质量的直接因果关系。

四、建议与注意事项

1. 及时验收：发包方应在工程完工后及时组织验收，避免擅自使用未经竣工验收的工程。
2. 保留证据：在工程使用过程中，如发现质量问题，应及时通知承包方并保留相关证据。
3. 合理主张：在主张赔偿时，应合理确定赔偿范围，并提供充分的证据来支持其主张。
4. 法律途径：如双方无法协商解决，可通过法律途径解决争议，但应确保主张有法律依据和事实支持。

发包方以质量不合格为由主张赔偿时，确实需要以实际损失为前提。在实际操作中，发包方应充分了解相关法律法规和司法解释，合理主张权利，并保留充分的证据来支持其主张。如有任何法律问题或需要进一步的法律建议，请直接向我咨询。