使用别人的声音做合成语音进行诈骗，责任应由实际实施诈骗行为的人承担。以下是从不同角度对此问题的详细分析：
一、法律责任主体
实际实施者：
- 根据《中华人民共和国刑法》的相关规定，诈骗公私财物，数额较大的，构成诈骗罪。在此类案件中，使用他人声音合成语音进行诈骗的行为人，是实际实施诈骗行为的人，因此应承担相应的刑事责任。
- 法院在判决时，会综合考虑诈骗行为所涉及的资金规模、严重性程度等多方面因素，来确定具体的刑罚。若诈骗金额达到一定数额，通常会面临三年以下有期徒刑、拘役或管制的刑事处罚，并需承担罚金责任；诈骗金额巨大或有其他严重情节的，可能被判处三年以上但不超过十年的有期徒刑，并需缴纳罚金；诈骗金额特别巨大或有其他特别严重情节的，则可能被判处十年以上有期徒刑甚至是无期徒刑，并需承担罚金或者没收财产的法律后果。
声音提供者（如存在）：
- 一般情况下，声音提供者并不直接参与诈骗行为，因此不承担刑事责任。但如果声音提供者明知他人将使用其声音进行诈骗活动，仍提供声音样本，则可能构成共同犯罪，需承担相应的刑事责任。不过，这种情况较为罕见，且需要具体的证据支持。
二、法律责任类型
刑事责任：
- 如前所述，实际实施诈骗行为的人将承担刑事责任，可能面临有期徒刑、拘役、管制或罚金等处罚。
民事责任：
- 除了刑事责任外，诈骗行为人还需承担民事责任，即赔偿被害人的经济损失。这包括被害人因诈骗行为而遭受的直接经济损失，如被骗取的资金、财物等。
三、特殊情况考虑
技术提供者的责任：
- 如果合成语音的技术提供者明知其技术将被用于诈骗活动，仍提供技术支持，则可能构成帮助信息网络犯罪活动罪或其他相关犯罪，需承担相应的刑事责任。但这种情况同样需要具体的证据支持。
未成年人或精神病人的责任：
- 如果诈骗行为人是未成年人或精神病人，且其不具备完全的刑事责任能力，则可能根据其具体情况减轻或免除刑事责任。但在此情况下，其监护人或法定代理人可能需承担相应的民事责任。
四、建议与措施
加强技术防范：
- 公众应提高警惕，增强对合成语音等新型诈骗手段的识别能力。同时，相关技术企业也应加强技术研发，提高语音合成技术的安全性和可识别性。
完善法律法规：
- 针对新型诈骗手段，立法机关应及时完善相关法律法规，明确各方的法律责任和处罚标准，为打击诈骗犯罪提供有力的法律支持。
加强执法力度：
- 执法机关应加大对诈骗犯罪的打击力度，提高破案率和追赃挽损率。同时，加强与国际社会的合作，共同打击跨国诈骗犯罪。
如有任何法律疑问或需要进一步的法律帮助，请直接向我咨询。我将根据您的具体情况，提供专业、全面的法律服务。