面对楼上半夜扰民而物业不管的情况，您不能直接以此为由拒交物业费，但可以通过合理合法的方式维护自己的权益，并督促物业履行其职责。以下是从不同角度为您提供的详细分析和建议：
一、物业的职责与业主的权益
物业的职责：
- 物业与业主之间存在物业服务合同关系，物业有义务提供包括小区秩序维护和管理在内的多项服务。这包括处理业主之间的纠纷，如楼上扰民问题，如果属于物业应管理的小区秩序范畴。
业主的权益：
- 业主有权享受物业提供的服务，并有权对物业的服务质量进行监督。如果物业未履行其职责，业主有权要求物业采取措施解决问题。
二、业主不能直接拒交物业费的原因
- 物业费是业主为获取物业服务而支付的费用，它涵盖了小区公共区域的保洁、绿化养护、设施设备维护等多个方面。即使物业在某一具体服务（如处理楼上扰民问题）上存在瑕疵，也并不意味着物业完全没有提供其他服务。因此，业主不能简单地以此为由直接拒交物业费。
三、业主维护权益的合法途径
保留证据：
- 您应保留与物业沟通楼上扰民问题的所有记录，如电话录音、微信聊天记录、书面报告等。这些证据将有助于证明您已经向物业反映过问题，且物业未妥善处理。
与物业协商：
- 主动与物业进行沟通，说明楼上扰民问题给您生活带来的困扰，要求物业采取措施解决问题。同时，您可以就物业费的支付事宜与物业进行协商，看是否能达成合理的解决方案，如在问题解决期间适当减免部分物业费等。
寻求外部帮助：
- 如果与物业协商无果，您可以向社区或相关部门投诉，甚至通过法律途径解决。在物业起诉您要求支付物业费时，您可以向法院提出物业存在服务不到位的抗辩。法院会综合判断物业的服务情况以及您的诉求，并根据实际情况进行判决。
四、特殊情况下的处理建议
- 如果楼上扰民行为严重到影响您的正常生活，且物业确实无法或不愿采取措施解决问题，您还可以考虑向公安机关报案或向法院提起相邻权纠纷诉讼，要求楼上住户停止侵害、排除妨碍并赔偿损失。
五、注意事项
- 在处理楼上扰民问题与物业费缴纳这两个问题时，应分开处理。您在维护自己权益的同时，也应继续履行缴纳物业费的义务，以避免因违约而承担不必要的法律责任。
综上所述，面对楼上半夜扰民而物业不管的情况，您应通过合法途径维护自己的权益，并督促物业履行其职责。同时，您也应继续履行缴纳物业费的义务，以确保小区的正常运作和物业服务的持续提供。如果您在处理过程中遇到任何问题或需要进一步的法律帮助，请随时向我咨询。