安全文明施工费能否扣回，需视具体情况和合同约定而定，不能一概而论。以下从不同角度进行分析：

一、安全文明施工费的性质与用途

安全文明施工费，全称安全防护、文明施工措施费，是依据国家现行的建筑施工安全、施工现场环境与卫生标准和有关规定而设立的专项费用。它用于购置和更新施工防护用具及设施，改善安全生产条件和作业环境，以保障施工工地的安全和环境文明。此费用具有专款专用的特点，不属于可以随意扣回的范畴。

二、合同约定是关键

1. 合同中有明确约定：

   • 如果发承包双方在合同中明确约定了安全文明施工费的支付方式、条件以及是否可以扣回等条款，那么应优先按照合同约定执行。例如，合同可能规定在特定情况下（如承包人违约、工程变更等），发包人有权扣回部分或全部安全文明施工费。

2. 合同中无明确约定：

   • 如果合同中没有明确约定安全文明施工费可以扣回，那么发包人通常无权单方面扣回该费用。因为安全文明施工费是保障施工安全和文明施工的必要支出，扣回该费用可能影响施工质量和安全，损害承包人的合法权益。

三、法律法规的考量

根据《建设工程工程量清单计价规范》等规范性文件，安全文明施工费应专款专用，发包人应在工程预付款中按一定比例提前支付，并在工程进度款中同步支付剩余部分。这些规定旨在确保安全文明施工费的及时支付和合理使用，保障施工安全和文明施工。因此，在法律法规没有明确规定可以扣回的情况下，发包人无权扣回安全文明施工费。

四、实际操作建议

1. 审查合同条款：

   • 承包人在签订合同时，应仔细审查合同中关于安全文明施工费的条款，确保自己的权益得到保障。如果合同中存在模糊或不利于自己的条款，应及时与发包人协商修改。

2. 保留相关证据：

   • 承包人在施工过程中，应妥善保留与安全文明施工费相关的证据，如支付凭证、发票、施工照片等。这些证据在发生纠纷时可以作为证明自己已履行义务和发包人应支付费用的依据。

3. 及时沟通协商：

   • 如果发包人提出扣回安全文明施工费的要求，承包人应及时与发包人沟通协商，了解扣回的原因和依据。如果认为扣回不合理或无法接受，可以寻求法律途径解决纠纷。

总结来说，安全文明施工费能否扣回需根据合同约定和法律法规进行判断。在合同没有明确约定且法律法规没有规定可以扣回的情况下，发包人无权扣回该费用。如果遇到相关问题或纠纷，建议直接向我咨询，我会根据你的具体情况提供专业的法律意见和帮助。