结论：对方在没有证据的情况下声称你骂人，可能构成诽谤或名誉权侵权，具体取决于其行为的性质和后果。以下是对此问题的详细分析：
一、可能构成诽谤
定义与构成要件：
- 诽谤是指故意散布虚构的言论，损害他人名誉的行为。
- 构成要件包括：散布的言论是虚构的；言论具有损害他人名誉的性质；行为人主观上具有故意。
应用分析：
- 如果对方在没有证据的情况下，故意声称你骂人，且这一言论是虚构的，那么对方的行为可能构成诽谤。
- 诽谤行为通常会对你的名誉造成损害，影响你的社会评价。
二、可能构成名誉权侵权
定义与构成要件：
- 名誉权侵权是指行为人通过侮辱、诽谤等方式，损害他人名誉权的行为。
- 构成要件包括：存在损害名誉权的行为；行为具有违法性；行为人主观上具有过错（故意或过失）；损害后果与行为之间存在因果关系。
应用分析：
- 对方声称你骂人，如果这一言论是不真实的，且对你的名誉造成了损害，那么对方的行为可能构成名誉权侵权。
- 名誉权侵权不仅要求行为具有违法性，还要求行为人主观上具有过错，并且损害后果与行为之间存在因果关系。
三、法律建议与行动指南
收集证据：
- 如果对方声称你骂人，但你没有实际骂人，那么你应该尽快收集证据，如聊天记录、录音、视频等，以证明你的清白。
- 证据是维护自己权益的关键，务必妥善保管。
与对方沟通：
- 在收集到足够证据后，你可以尝试与对方沟通，要求其停止传播不实言论，并公开道歉。
- 沟通时保持冷静和理性，避免情绪化冲突。
寻求法律帮助：
- 如果对方拒绝停止传播不实言论，或者你的名誉已经受到了严重损害，那么你可以考虑寻求法律帮助。
- 你可以向法院提起诉讼，要求对方承担诽谤或名誉权侵权的法律责任。
注意法律程序：
- 在提起诉讼前，你需要了解相关的法律程序和要求，如起诉状的撰写、证据的提交等。
- 如果你不熟悉法律程序，可以咨询专业律师以获取帮助。
进一步思考：在实际操作中，名誉权侵权和诽谤的界限有时并不那么清晰。因此，在处理此类纠纷时，建议你根据具体情况咨询专业律师，以便更准确地判断对方的行为性质，并采取相应的法律措施。如果你有任何法律问题或需要进一步的法律建议，可以直接向我咨询。