当你遇到楼下故意扰民但没有直接证据的情况时，可以采取以下步骤来解决问题：

1. 尝试友好沟通并收集间接证据：

   • 首先，尝试与楼下住户进行友好沟通，明确表达你的困扰，并希望对方能够注意并改正扰民行为。在沟通过程中，你可以尝试录音或录像，作为间接证据来记录对方的扰民行为和你已尝试沟通的事实。

2. 向物业或居委会投诉并请求协助：

   • 如果直接沟通没有效果，你可以向小区的物业管理处或当地居委会投诉。向他们详细反映情况，并请求他们协助调解。物业和居委会通常有丰富的调解经验和机制，能够帮助你解决问题。

3. 报警或向环保部门投诉：

   • 在调解无效的情况下，你可以选择报警。向警方说明扰民行为的具体情况，以及你已尝试的沟通方式。警方会根据相关法律规定进行调查处理。
   • 另外，如果扰民行为主要表现为噪音污染，你还可以向当地环保部门投诉。环保部门有权对环境噪声进行监测和管理，并将依法进行调查和处理。

4. 考虑提起民事诉讼：

   • 如果以上方式都无法解决问题，且扰民行为给你造成了较大损失，如影响身心健康、工作效率等，你可以考虑提起民事诉讼来维护自己的合法权益。在诉讼过程中，虽然直接证据不足，但你可以通过提供间接证据、证人证言等方式来支持你的主张。法院将根据事实和法律规定作出判决。

5. 注意事项：

   • 在整个过程中，保持冷静和理智至关重要。避免情绪化的反应，以免激化矛盾。
   • 同时，尽可能保留相关证据，无论是直接沟通的记录、投诉的凭证还是间接证据，都将在解决问题过程中发挥重要作用。

综上所述，面对楼下故意扰民但没有直接证据的情况，你可以通过友好沟通、向物业或居委会投诉、报警或向环保部门投诉以及考虑提起民事诉讼等方式来解决问题。在整个过程中，保持冷静、保留证据是关键。如果你有任何疑问或需要进一步的法律帮助，请随时向我咨询。