在货物买卖合同纠纷中，如果货物质量不合格，您确实有权主张退回货款，但具体能否实现以及实现的方式，需根据合同约定、法律规定以及实际情况综合判断。以下从不同角度为您详细分析：

一、合同约定优先

1. 合同中有明确约定：如果买卖合同中明确约定了货物质量标准、检验期限以及质量不合格时的处理方式（如退货、换货、修理或退款等），那么当货物质量不符合约定时，您可以直接依据合同约定主张退回货款。这是最直接且有力的依据。

2. 合同未明确约定或约定不明：如果合同中没有明确约定或约定不明确，那么您需要依据法律规定来主张权利。

二、法律规定支持

1. 《民法典》相关规定：根据《中华人民共和国民法典》的相关规定，出卖人应当按照约定的质量要求交付标的物。出卖人提供有关标的物质量说明的，交付的标的物应当符合该说明的质量要求。如果货物质量不符合要求，致使不能实现合同目的的，买受人可以拒绝接受标的物或者解除合同，并有权要求出卖人承担违约责任，包括退回货款。

2. 质量检验与异议期：您应当在约定的检验期限内将货物质量不符合约定的情形通知出卖人。如果未约定检验期限，买受人应当在发现或者应当发现标的物的数量或者质量不符合约定的合理期限内通知出卖人。逾期未通知的，视为标的物的数量或者质量符合约定。因此，及时提出质量异议是主张退回货款的关键。

三、实际操作建议

1. 收集证据：在主张退回货款前，您需要收集充分的证据证明货物质量不合格，如检验报告、照片、视频等。这些证据将有助于您在协商或诉讼中证明自己的主张。

2. 与出卖人协商：在发现货物质量不合格后，您可以先与出卖人进行协商，尝试通过友好方式解决问题。如果协商成功，可以签订书面协议明确退款金额、退款方式等事项。

3. 寻求法律途径：如果协商无果，您可以考虑通过法律途径解决纠纷。您可以向法院提起诉讼或申请仲裁（如果合同中有仲裁条款），要求出卖人退回货款并承担违约责任。在诉讼或仲裁过程中，您需要提交充分的证据证明自己的主张。

四、可能面临的法律后果

1. 如果主张成立：如果法院或仲裁机构认定货物质量确实不合格，且您已按照法律规定和合同约定履行了通知义务等，那么您有权要求出卖人退回货款，并可能要求出卖人承担其他违约责任，如赔偿损失等。

2. 如果主张不成立：如果法院或仲裁机构认定货物质量符合约定或您未按照法律规定和合同约定履行通知义务等，那么您的主张可能不会被支持。此时，您可能需要承担败诉的法律后果，包括支付诉讼费用等。

综上所述，货物质量不合格时您有权主张退回货款，但具体能否实现以及实现的方式需根据合同约定、法律规定以及实际情况综合判断。如果您遇到此类纠纷，建议及时收集证据并与出卖人协商解决；如果协商无果，可以考虑寻求法律途径解决。如有任何疑问或需要进一步的法律帮助，请随时向我咨询。