不可以仅因物业管不了小区一楼业主乱搭乱建就不交物业费。以下从多个角度为你详细分析：
物业费缴纳的法定义务
根据《物业管理条例》等相关法律法规，业主与物业服务企业签订物业服务合同后，业主有按照合同约定缴纳物业费的义务。物业费是用于小区公共区域的维护、管理、清洁、绿化等多项服务的费用，是保障小区正常运转和业主共同利益的基础。因此，按时缴纳物业费是业主的法定义务，不能因个别问题而拒绝履行。
物业对乱搭乱建的管理责任
物业的职责范围：物业确实有责任对小区内的乱搭乱建等违规行为进行管理和制止。这包括巡查、发现、报告以及协助相关部门进行执法等。然而，物业的管理权限和执法能力是有限的，他们不能直接采取强制拆除等执法行为，这需要依靠城市管理、规划等政府部门的介入。
物业已尽责的情况：如果物业已经按照合同约定和相关法律法规，对乱搭乱建行为进行了巡查、发现、报告，并积极协助政府部门进行执法，但问题仍未得到解决，那么这并不能成为业主拒绝缴纳物业费的理由。因为物业已经履行了其应尽的管理职责。
物业未尽责的情况：如果物业对乱搭乱建行为视而不见，未进行巡查、发现、报告，也未协助政府部门进行执法，那么这可能构成物业的违约行为。业主可以向物业提出投诉，要求其履行管理职责。但即便如此，业主也不能直接拒绝缴纳物业费，而应通过合法途径解决纠纷，如向相关部门投诉、提起诉讼等。
业主的维权途径
向物业投诉：业主可以向物业提出投诉，要求其对乱搭乱建行为进行管理和制止。如果物业未予理会或处理不当，业主可以进一步向物业的上级主管部门或相关政府部门投诉。
向相关部门举报：业主可以向城市管理、规划等政府部门举报乱搭乱建行为，要求政府部门进行执法和拆除。
提起诉讼：如果物业或相关部门的处理结果不能满足业主的诉求，业主还可以考虑通过法律途径解决纠纷，如提起诉讼要求物业承担违约责任或要求政府部门履行执法职责等。
拒绝缴纳物业费的法律后果
如果业主仅因物业管不了乱搭乱建就拒绝缴纳物业费，那么可能会面临以下法律后果：
物业起诉业主：物业有权向法院提起诉讼，要求业主缴纳拖欠的物业费及可能产生的滞纳金等费用。
影响个人信用：在部分地区，拖欠物业费可能会被纳入个人信用记录，对业主的信用评级和贷款等产生不良影响。
建议：作为业主，应按时缴纳物业费，同时积极监督物业的管理行为。如果发现物业存在管理不当或违约行为，应通过合法途径进行维权，而不是直接拒绝缴纳物业费。如果你在物业纠纷方面有任何疑问或需要进一步的法律帮助，可以直接向我咨询。