结论：工厂给你回扣，确实有可能成为老板告你的理由，具体取决于回扣的性质、数额以及是否违反了相关法律法规或公司规章制度。
一、回扣的性质与法律后果
商业贿赂：
- 如果回扣是以不正当手段获取的，且目的是为了谋取交易机会或竞争优势，那么这种回扣可能构成商业贿赂。
- 根据《中华人民共和国反不正当竞争法》等相关法律法规，商业贿赂是违法的，不仅可能面临行政处罚，还可能涉及刑事责任。
职务侵占或贪污：
- 如果你作为公司员工，利用职务之便，将本应属于公司的财产（如回扣）非法占为己有，且数额较大，那么这种行为可能构成职务侵占或贪污。
- 根据《中华人民共和国刑法》的相关规定，职务侵占或贪污是犯罪行为，将受到刑事处罚。
二、公司规章制度与劳动合同
公司规章制度：
- 许多公司都有明确的规章制度，禁止员工接受供应商或客户的回扣、贿赂等不正当利益。
- 如果你违反了公司的规章制度，公司有权根据规章制度对你进行处罚，包括但不限于警告、罚款、解雇等。
劳动合同：
- 劳动合同中可能也包含了关于员工行为规范的条款，包括禁止接受回扣等不正当利益。
- 如果你违反了劳动合同中的相关条款，公司有权依据劳动合同对你进行处理。
三、老板告你的可能理由与后果
理由：
- 老板可能以你接受回扣、违反公司规章制度或劳动合同为由，向你提出索赔或要求你承担法律责任。
- 如果回扣涉及商业贿赂、职务侵占或贪污等违法行为，老板还可能向相关部门举报，导致你面临行政处罚或刑事责任。
后果：
- 你可能需要承担民事赔偿责任，赔偿公司因你接受回扣而遭受的损失。
- 你可能面临行政处罚，如罚款、没收违法所得等。
- 如果行为构成犯罪，你还可能面临刑事处罚，如有期徒刑、罚金等。
四、建议与措施
立即停止接受回扣：
- 如果你正在接受回扣，应立即停止这种行为，避免进一步违法或违反公司规章制度。
与公司沟通：
- 如果你对回扣的性质或公司规章制度有疑问，建议与公司进行沟通，明确公司的立场和要求。
寻求法律帮助：
- 如果你担心自己可能面临法律责任或公司处罚，建议寻求专业律师的法律帮助，了解自己的权利和义务，以及可能的法律后果。
作为张时阳律师，我擅长处理工伤赔偿、民间借贷、交通事故等领域的法律问题。如果你有任何关于这些领域的法律问题或需要进一步的法律帮助，请直接向我咨询。