改变房屋结构的行为涉及多个政府部门的协同管理。具体来说：

1. 物业管理部门：负责监督和管理小区内物业的使用情况，对业主私自改变房屋结构的行为，物业应依据《物业管理条例》要求业主停止并整改。

2. 住房和城乡建设部门（住建局）：作为房屋建设和管理的主管部门，对房屋结构安全负有监管责任。涉及建筑主体和承重结构变动的装修工程，必须委托设计单位提出设计方案，并经过相关审批。若无设计方案擅自施工，住建部门将责令改正并处以罚款。

3. 城市综合执法部门（城管）：集中行使多个领域的行政处罚权，包括违法建设、违规装修等行为的查处。对于未取得或违反建设工程规划许可证的建设行为，城管部门将依法进行处罚。

4. 房地产行政主管部门：根据相关法律法规，对擅自改变房屋结构的行为进行责令限期改正、警告及罚款。

此外，对于商品房改变房屋结构的情况，除了上述部门外，还可能涉及城市规划部门对改变后的房屋结构是否符合城市规划要求进行确认，以及市场监督管理部门对涉及商业经营活动的房屋结构改变进行监管。

综上所述，改变房屋结构需要综合考虑房屋性质、改动程度及可能带来的影响，并咨询相关部门办理合法手续。如有任何疑问或需要进一步的法律帮助，请直接向我咨询。