经销商在符合一定条件下是可以起诉代理商的。以下从几个方面为你详细分析：
一、法律关系分析
合同关系：经销商与代理商之间通常存在买卖合同或经销合同关系。如果合同中明确规定了产品质量标准、验收程序以及违约责任等条款，那么当甲方（可能是代理商的客户或代理商自身，这里假设甲方行为代表代理商利益或影响代理商责任）以水泥质量问题为由扣款，而经销商认为扣款无依据时，可以依据合同条款来主张自己的权益。
侵权关系：如果代理商提供的水泥确实存在质量问题，并且这一质量问题给经销商造成了损失（如被甲方扣款导致的直接经济损失），那么经销商也可以基于侵权关系向代理商主张赔偿。
二、起诉条件
证据收集：经销商要起诉代理商，首先需要收集足够的证据来证明自己的主张。这包括但不限于：合同文本、水泥质量检测报告、甲方扣款的凭证、与代理商的沟通记录等。虽然你提到甲方没有证据扣了经销商6万元，但这并不妨碍经销商自己收集证据来证明水泥质量没有问题或扣款不合理。
损失确定：经销商需要明确自己的损失金额，即被甲方扣款的6万元是否确实是由于代理商提供的水泥质量问题导致的。如果经销商能够证明这一点，那么这6万元就可以作为起诉时的赔偿请求金额。
诉讼时效：根据《中华人民共和国民法典》的相关规定，向人民法院请求保护民事权利的诉讼时效期间为三年。因此，经销商需要在知道或应当知道自己的权益受到侵害之日起三年内提起诉讼。
三、可能面临的法律后果
胜诉：如果经销商能够提供充分的证据证明代理商提供的水泥质量没有问题或扣款不合理，并且法院认定经销商的主张成立，那么经销商将有可能获得法院的支持，要求代理商赔偿被扣的6万元以及可能产生的其他损失（如诉讼费用、律师费用等）。
败诉：如果经销商无法提供足够的证据来支持自己的主张，或者法院认定经销商的主张不成立，那么经销商将可能面临败诉的风险，即无法获得赔偿，并且可能需要承担诉讼费用等。
四、建议
与代理商协商：在提起诉讼之前，经销商可以尝试与代理商进行协商，看是否能够通过友好方式解决纠纷。这不仅可以节省时间和成本，还可以维护双方之间的商业关系。
寻求法律援助：如果经销商对法律程序不熟悉或觉得自己无法独自应对诉讼，可以寻求专业律师的帮助。律师可以提供法律咨询、代理诉讼等服务，帮助经销商更好地维护自己的权益。
完善合同条款：为了避免类似纠纷的再次发生，经销商在与代理商签订合同时应该尽可能完善合同条款，明确产品质量标准、验收程序、违约责任等关键内容。这样可以在纠纷发生时有明确的依据来主张自己的权益。
如果你有进一步的疑问或需要更具体的法律建议，可以直接向我咨询。