火灾造成三人以上伤亡或损失，相关责任人的责任需根据具体情形来确定，可能涉及刑事责任、民事赔偿责任以及行政责任。以下从这几个方面进行详细分析：
一、刑事责任
放火罪：
- 如果火灾是由故意放火行为引起的，且造成三人以上伤亡或重大财产损失，那么放火者将构成放火罪。
- 根据《中华人民共和国刑法》的相关规定，放火罪是重罪，一旦成立，将面临严厉的刑事处罚，包括有期徒刑、无期徒刑甚至死刑。
失火罪：
- 如果火灾是由于过失行为引起的，比如疏忽大意或过于自信导致的火灾，且造成三人以上伤亡或重大财产损失，那么相关责任人可能构成失火罪。
- 失火罪的刑事处罚相对较轻，但也可能面临有期徒刑等刑罚。
其他相关犯罪：
- 如果火灾的发生与特定职业或行为有关，如消防责任事故罪（违反消防管理法规，经消防监督机构通知采取改正措施而拒绝执行，造成严重后果的），相关责任人也可能面临刑事责任。
二、民事赔偿责任
侵权责任：
- 无论火灾是故意还是过失引起，只要造成了他人的人身伤害或财产损失，相关责任人都需要承担民事赔偿责任。
- 赔偿范围包括医疗费、护理费、交通费、营养费、住院伙食补助费等为治疗和康复支出的合理费用，以及因误工减少的收入。造成残疾的，还应当赔偿辅助器具费和残疾赔偿金；造成死亡的，还应当赔偿丧葬费和死亡赔偿金。
赔偿主体：
- 赔偿主体可能是直接引发火灾的责任人，也可能是对火灾发生负有间接责任的相关单位或个人，如房东、物业管理公司等，具体取决于火灾的原因和各方的过错程度。
三、行政责任
行政处罚：
- 如果火灾的发生与违反行政管理法规有关，如违反消防安全规定等，相关责任人可能面临行政处罚，如罚款、拘留等。
行政处分：
- 对于国家机关工作人员或企事业单位员工，如果因其玩忽职守或违反规章制度导致火灾发生，还可能面临行政处分，如警告、记过、降级、撤职等。
实际建议
- 及时报警并配合调查：一旦发生火灾，应立即报警并配合消防部门和相关机构的调查，以便准确确定火灾原因和责任人。
- 保留证据：对于火灾造成的损失，应尽可能保留相关证据，如照片、视频、医疗记录等，以便在后续的赔偿或诉讼过程中使用。
- 咨询专业律师：如果涉及复杂的法律问题或赔偿纠纷，建议咨询专业律师以获取更具体的法律建议和帮助。
火灾造成三人以上伤亡或损失时，相关责任人可能面临刑事责任、民事赔偿责任以及行政责任。具体责任需根据火灾的原因、各方的过错程度以及相关法律法规来确定。如果你有具体的法律问题或需要进一步的法律帮助，可以直接向我咨询。