结论：面对小区有人乱说别人且没有证据的情况，你可以通过沟通协商、收集间接证据、寻求第三方调解以及考虑法律途径等多种方式来处理。

1. 沟通协商：

   • 尝试沟通：首先，你可以尝试与散布言论的人进行直接沟通，了解他们为何会这样说，并尝试解释清楚事实真相，看是否能够达成和解。这种方式成本最低，也最有可能迅速解决问题。
   • 保持冷静：在沟通过程中，务必保持冷静和理性，避免情绪化的回应，这样更有助于问题的解决。

2. 收集间接证据：

   • 寻找目击者：尽管直接证据可能难以获取，但你可以尝试寻找可能听到或看到相关言论的目击者，并请他们提供证言。
   • 记录言论：如果可能的话，尝试记录下散布言论的具体内容、时间、地点等信息，这些信息在后续处理中可能作为间接证据使用。
   • 利用技术手段：如果言论是在社交媒体或小区公告栏等公开场合发布的，你可以截图或保存相关链接作为证据。

3. 寻求第三方调解：

   • 小区物业或居委会：你可以向小区物业或居委会反映情况，请求他们协助调解。这些机构通常有一定的权威性和调解经验，可能能够帮助你解决问题。
   • 人民调解委员会：如果小区物业或居委会无法解决问题，你还可以考虑向当地的人民调解委员会申请调解。人民调解委员会是依法设立的调解民间纠纷的群众性组织，其调解协议具有法律约束力。

4. 考虑法律途径：

   • 名誉权侵权诉讼：如果散布的言论严重损害了你的名誉权，且其他方式无法解决问题，你可以考虑向法院提起名誉权侵权诉讼。在诉讼过程中，你需要提供足够的证据证明对方的行为构成了名誉权侵权，并请求法院判决对方承担相应的法律责任。
   • 注意诉讼风险：然而，诉讼过程可能较为漫长且成本较高，你需要权衡利弊后做出决定。同时，即使胜诉，也可能面临执行难等问题。

法律背景与建议：

• 根据《中华人民共和国民法典》的相关规定，自然人享有名誉权，任何组织或者个人不得以侮辱、诽谤等方式侵害他人的名誉权。如果散布的言论确实构成了名誉权侵权，你有权要求对方停止侵害、恢复名誉、消除影响、赔礼道歉，并可以要求赔偿损失。
• 在处理此类问题时，建议你保持冷静和理性，尽量通过沟通协商或第三方调解来解决问题。如果确实需要采取法律途径，务必在充分了解法律风险和成本后做出决定，并寻求专业律师的帮助以确保你的权益得到最大程度的保护。

后续行动建议：

• 在采取任何行动之前，先评估散布言论的严重性和对你的影响程度。如果言论并不严重或对你的影响较小，可能不需要采取过于激烈的行动。
• 如果决定采取法律途径，务必及时收集并保存相关证据，以便在诉讼过程中使用。
• 在整个处理过程中，保持与相关方的良好沟通，尽量通过和平、理性的方式解决问题。