关于租房客把热水器安全阀给改装坏了的责任归属问题，我们可以从以下几个方面进行分析：
承租人过错导致的损坏：
- 根据《中华人民共和国民法典》第七百一十四条，承租人应当妥善保管租赁物，因保管不善造成租赁物毁损、灭失的，应当承担赔偿责任。如果热水器安全阀的改装是由承租人擅自进行，且因此导致了热水器的损坏，那么承租人应承担维修或更换的责任。
出租人的维修义务：
- 通常情况下，出租人负有维修租赁物的义务，但这并不包括由承租人过错造成的损坏。根据《民法典》第七百一十二条和第七百一十三条，出租人应当履行租赁物的维修义务，但承租人的过错致使租赁物需要维修的，出租人不承担维修义务。
合同约定的优先性：
- 如果租赁合同中明确约定了关于热水器等租赁物维修或更换的具体责任归属，那么双方应严格按照合同约定执行。合同中的约定可以优于法律规定，成为判断责任归属的依据。
综上所述，如果租房客擅自改装热水器安全阀并因此导致热水器损坏，那么根据法律规定和合同约定，承租人应承担相应的维修或更换责任。出租人在这种情况下不承担维修义务，但双方可以通过协商或依据租赁合同中的相关条款来解决纠纷。
因此，结论是：租房客擅自改装热水器安全阀导致的损坏，应由承租人负责维修或更换。如果双方对此有争议，建议查阅租赁合同中的相关条款，或咨询专业律师进行进一步的法律咨询和调解。