结论：在您描述的情况下，对方的行为是否构成寻衅滋事，需要具体分析其行为是否满足寻衅滋事罪的构成要件，不能仅凭其知道您骂他且没有证据就来骂您这一行为就断定其构成寻衅滋事。

分析：

1. 寻衅滋事罪的构成要件：

   • 寻衅滋事罪通常指的是在公共场所或者非公共场所，但情节恶劣、造成社会秩序严重混乱的行为，如随意殴打他人、追逐、拦截、辱骂、恐吓他人等。
   • 关键在于行为是否具有“随意性”和“恶劣性”，以及是否对社会秩序造成了严重破坏。

2. 对方行为的具体分析：

   • 如果对方仅仅是因为知道您骂他（尽管没有证据）而前来辱骂您，且这种辱骂行为并未达到“情节恶劣”的程度，比如只是短暂的、一对一的辱骂，并未造成社会秩序的混乱，那么这种行为可能并不构成寻衅滋事罪。
   • 如果对方的行为超出了简单的辱骂，比如进行了持续的、公开的辱骂，或者伴随有威胁、恐吓等行为，且造成了社会秩序的严重混乱，那么这种行为可能更接近于寻衅滋事罪的构成要件。

3. 法律后果与建议：

   • 如果对方的行为并不构成寻衅滋事罪，但仍然违反了治安管理处罚法，您可以选择向公安机关报案，要求对方承担相应的行政责任。
   • 如果对方的行为确实构成了寻衅滋事罪，那么您不仅可以向公安机关报案，还可以考虑通过民事诉讼的方式要求对方承担侵权责任，包括赔偿您的精神损失等。
   • 在任何情况下，我都建议您保留好相关证据，如录音、录像、证人证言等，以便在需要时证明对方的行为和您的损失。

进一步思考：

• 在处理此类纠纷时，除了考虑法律途径外，还可以尝试通过沟通、协商等方式解决。毕竟，法律诉讼往往耗时耗力，且结果具有不确定性。
• 如果您对对方的行为感到不安或恐惧，可以考虑寻求家人、朋友或社区组织的帮助和支持。

总结：对方的行为是否构成寻衅滋事罪，需要具体分析其行为是否满足寻衅滋事罪的构成要件。在处理此类纠纷时，建议您保留好相关证据，并根据实际情况选择合适的解决方式。如果您有任何疑问或需要进一步的法律帮助，请随时向我咨询。