可以找工厂进行赔偿。针对您从工厂购买货物后，因货物存在很大一部分质量问题导致退货的情况，以下是从不同角度为您进行的分析：
一、法律依据
根据《中华人民共和国民法典》的相关规定，特别是关于买卖合同的部分，如果卖方（工厂）交付的货物存在质量问题，导致买方（您）无法正常使用或销售，买方有权要求卖方承担违约责任，包括但不限于退货、换货、修理以及赔偿损失等。
二、赔偿范围
直接损失：这包括您因退货而产生的直接费用，如运输费、检验费等。如果因为货物质量问题导致您无法按时履行与第三方的合同，还可能产生违约金等损失，这些也属于直接损失的范畴。
间接损失：间接损失可能包括您因货物质量问题而错过的销售机会、因此导致的客户流失等。虽然间接损失的认定和计算可能相对复杂，但在某些情况下，也是可以要求工厂进行赔偿的。
三、操作建议
收集证据：首先，您需要收集所有与货物质量问题相关的证据，包括但不限于货物照片、检验报告、退货记录等。这些证据将有助于您在后续的协商或诉讼中证明自己的主张。
与工厂协商：在收集到足够证据后，您可以尝试与工厂进行协商，要求其承担相应的赔偿责任。在协商过程中，您可以明确提出自己的赔偿要求，并引用相关的法律法规作为依据。
寻求法律途径：如果协商无果，您可以考虑通过法律途径来解决纠纷。这包括向法院提起诉讼或向相关的仲裁机构申请仲裁。在诉讼或仲裁过程中，您需要提交所有收集到的证据，并接受法院或仲裁机构的裁决。
四、注意事项
时效性：请注意，根据法律规定，民事权利的诉讼时效期间通常为三年。因此，您需要在发现货物质量问题后尽快采取行动，以免超过诉讼时效期间而丧失胜诉权。
合同条款：在签订买卖合同时，请务必仔细阅读合同条款，特别是关于货物质量、验收标准、违约责任等方面的规定。这些条款将直接影响您在后续纠纷中的权益。
如果您在处理此类纠纷时遇到任何困难或疑问，可以直接向我咨询。我会根据您的具体情况，为您提供专业的法律建议和帮助。