针对建设违章建筑且建筑存在安全隐患、拒不整改的行为，可能涉及以下法律责任：
违反城乡规划法律法规的责任
- 法律依据：根据《中华人民共和国城乡规划法》第六十四条，未取得建设工程规划许可证或者未按照建设工程规划许可证的规定进行建设的，由县级以上地方人民政府城乡规划主管部门责令停止建设；尚可采取改正措施消除对规划实施的影响的，限期改正，处建设工程造价百分之五以上百分之十以下的罚款；无法采取改正措施消除影响的，限期拆除，不能拆除的，没收实物或者违法收入，可以并处建设工程造价百分之十以下的罚款。
- 分析：若建筑被认定为违章建筑，且存在安全隐患，城乡规划主管部门有权要求停止建设、限期改正或拆除。若拒不整改，将面临更严厉的处罚，包括罚款、没收或强制拆除。
违反建筑安全法律法规的责任
- 法律依据：根据《中华人民共和国建筑法》第七十条，违反本法规定，对不具备相应资质等级条件的单位颁发该等级资质证书的，由其上级机关责令收回所发的资质证书，对直接负责的主管人员和其他直接责任人员给予行政处分；构成犯罪的，依法追究刑事责任。同时，若建筑存在安全隐患，根据《建筑法》的相关规定，建设单位、施工单位等责任主体需承担相应的法律责任，包括但不限于责令改正、罚款、停业整顿、降低资质等级、吊销资质证书等。
- 特别条款：虽然直接的法律条款可能并未明确提及“拒不整改”的具体处罚，但根据《建筑法》的精神，对于存在安全隐患且拒不整改的建筑，相关部门有权采取更为严厉的措施，包括强制拆除或采取其他必要措施以消除安全隐患。
- 分析：建筑存在安全隐患且拒不整改，不仅违反了建筑安全的基本要求，也威胁到了公共安全。因此，相关部门有权依据建筑法的相关规定，对责任主体进行处罚，并采取必要措施消除安全隐患。
可能涉及的刑事责任
- 法律依据：若违章建筑的建设或拒不整改行为导致严重后果，如人员伤亡或重大财产损失，可能构成犯罪。根据《中华人民共和国刑法》的相关规定，如第一百三十四条（重大责任事故罪）、第一百三十五条（重大劳动安全事故罪）等，责任人员可能面临刑事处罚。
- 分析：虽然并非所有违章建筑且拒不整改的行为都会构成犯罪，但若该行为导致了严重后果，如人员伤亡或重大财产损失，那么责任人员将可能面临刑事责任的追究。
法律建议：
- 立即整改：若您的建筑被认定为违章建筑且存在安全隐患，建议您立即采取措施进行整改，以消除安全隐患并避免可能的法律责任。
- 咨询专业律师：在处理此类问题时，建议您咨询专业律师以获取更具体的法律建议。律师可以根据您的具体情况，为您提供针对性的法律策略和解决方案。
- 配合相关部门：在整改过程中，您应积极配合相关部门的工作，如提供必要的文件、资料等，以便相关部门能够更好地了解情况并作出决策。
后续行动建议：
- 若您已收到相关部门的整改通知或处罚决定，请务必认真对待并及时处理。
- 若您对整改要求或处罚决定有异议，可以通过法律途径进行申诉或复议。
如有任何疑问或需要进一步的法律帮助，请直接向我咨询。