结论：在双方都没有证据、没有证人的情况下，对方声称你打了他而实际上你并未动手，这构成了一个难以直接证明的事实争议。以下是从不同角度对此问题的详细分析：

1. 法律原则与举证责任：

   • 在民事诉讼中，通常遵循“谁主张，谁举证”的原则。这意味着，如果对方声称你打了他，那么对方需要承担举证责任，即提供足够的证据来支持其主张。
   • 若对方无法提供任何证据，如监控录像、目击者证言、医疗记录等，来证明你确实动手打了人，那么其主张可能不会被法院采纳。

2. 可能的法律后果：

   • 如果对方无法证明其主张，而你又能提供合理的解释或证据（尽管在此情况下可能很难）来反驳对方的主张，那么法院可能会认定对方的主张不成立。
   • 然而，如果法院认为双方都没有提供足够的证据来证明各自的主张，那么法院可能会根据公平原则或其他相关法律规定，对双方进行调解或作出其他裁决。

3. 应对策略与建议：

   • 保持冷静与理性：首先，保持冷静，不要与对方发生进一步的争执或冲突。理性地分析情况，并考虑如何最好地维护自己的权益。
   • 收集证据：尽管在此情况下可能很难收集到直接证据，但你可以尝试收集其他间接证据，如通话记录、短信、社交媒体消息等，以证明你并未动手打人或对方可能存在诬告的动机。
   • 寻求法律帮助：咨询专业律师（如我），了解你的法律权益和可能的应对策略。律师可以帮助你分析情况，提供法律建议，并在必要时代表你出庭应诉。
   • 考虑调解或和解：如果双方都有意愿，可以考虑通过调解或和解的方式解决争议。这可以节省时间和金钱，并避免进一步的法律纠纷。

4. 特殊情况考虑：

   • 如果对方的行为构成了诽谤或诬告，你还可以考虑提起刑事自诉或民事诉讼，要求对方承担相应的法律责任。然而，这需要你有足够的证据来证明对方的行为确实构成了诽谤或诬告。

进一步思考：在此类争议中，证据的收集和保存至关重要。尽管在此情况下可能很难收集到直接证据，但你应该尽可能保留所有可能与争议有关的证据和信息。同时，你也应该了解自己的法律权益和可能的应对策略，以便在必要时采取适当的行动来维护自己的权益。如果你有任何进一步的疑问或需要法律帮助，请直接向我咨询。