结论：没打人却被说打人了，在符合一定条件的情况下，确实可以告对方诽谤罪。不过，是否构成诽谤罪，需要从多个角度进行详细分析。
分析角度一：诽谤罪的构成要件
根据《中华人民共和国刑法》的相关规定，诽谤罪是指故意捏造并散布虚构的事实，足以贬损他人人格，破坏他人名誉，情节严重的行为。要构成诽谤罪，必须满足以下几个要件：
捏造事实：即无中生有，凭空制造虚假的事实。在你所描述的情况中，如果对方确实没有打人，但对方却声称你打人了，这就属于捏造事实。
散布虚构事实：即将捏造的事实以一定的方式公开传播，使不特定的人或多数人知道。这可以通过口头、书面、网络等多种方式进行。
情节严重：这通常指的是捏造并散布的事实对被害人的名誉造成了严重的损害，或者造成了其他严重的后果，如社会评价降低、精神受到严重损害等。
分析角度二：是否满足诽谤罪的构成要件
在你所描述的情况中，如果对方确实捏造了“你打人了”这一虚假事实，并且通过某种方式进行了散布，且这一行为对你的名誉造成了严重的损害，那么对方的行为就有可能构成诽谤罪。
分析角度三：举证责任与诉讼策略
举证责任：在诽谤罪的诉讼中，你需要承担举证责任，即证明对方确实捏造了虚假事实并进行了散布，且这一行为对你造成了严重的损害。这可能需要你收集相关的证据，如证人证言、录音录像、网络截图等。
诉讼策略：在提起诉讼前，你可以考虑先与对方进行协商，要求对方停止侵权行为并公开道歉。如果协商无果，你可以向公安机关报案，要求公安机关进行调查处理。如果公安机关认为不构成犯罪或者不予立案，你还可以向人民法院提起自诉，要求追究对方的刑事责任。
分析角度四：其他可能的法律后果
即使对方的行为不构成诽谤罪，也可能构成民事侵权行为。根据《中华人民共和国民法典》的相关规定，你可以要求对方承担停止侵害、恢复名誉、消除影响、赔礼道歉以及赔偿损失等民事责任。
建议：
收集证据：尽快收集能够证明对方捏造事实并散布的相关证据，以便在后续的诉讼或协商中占据有利地位。
咨询专业律师：虽然我在这里为你提供了一些基本的法律分析，但具体的法律程序和策略还需要根据你的具体情况来制定。因此，我建议你咨询一位专业的刑事辩护律师，以便得到更具体、更专业的法律建议。
保持冷静与理性：在处理这类纠纷时，保持冷静与理性是非常重要的。不要因为情绪激动而做出一些不理智的行为，以免给自己带来不必要的麻烦。
如果你有任何进一步的法律问题或需要进一步的法律帮助，请随时向我咨询。