本发明公开了一种基于多情感说话人自适应的情感语音合成方法，属于语音合成技术领域，包括：对多说话人情感语音数据模型进行说话人自适应训练，获得多说话人情感语音数据的平均音模型；对平均音模型进行说话人自适应变换，得到说话人相关的自适应模型；得到目标文本的上下文相关的标注文件，并生成相应的语音参数；将语音参数合成得到目标说话人目标情感的语音。本发明示例的语音合成方法，可以减小语音库中说话人的差异所造成的影响，提高合成语音的情感相似度，只用少量的待合成的情感语料，就能够合成出自然度、流利度、情感相似度都很好的情感语音。