基于深度神经网络的多音字读音的判别方法和装置

    公开(公告)号:CN107729313B

    公开(公告)日:2021-09-17

    申请号:CN201710876713.8

    申请日:2017-09-25

    Inventor: 聂志朋 徐扬凯

    Abstract: 本申请提出一种基于深度神经网络的多音字读音的判别方法和装置,其中,上述基于深度神经网络的多音字读音的判别方法包括:对待识别文本中的每个汉字进行量化编码,生成所述汉字的特征向量;根据汉字的特征向量,结合所述汉字的双方向的上下文信息,生成汉字的输入特征;将所述汉字的输入特征分别输入声母、韵母和声调对应的DNN模型,分别获得第一概率、第二概率和第三概率;根据第一概率、第二概率和第三概率计算声母、韵母和声调的各种组合的概率,以概率最高的组合作为所述汉字的读音。本申请可以提高读音判别的准确性,有效缓解多音字高频音引起的训练样本不均衡的问题,并且可以解决多个多音字的读音判别问题,有利于语音合成系统的集成。

    一种语音处理方法、装置和电子设备

    公开(公告)号:CN110767212A

    公开(公告)日:2020-02-07

    申请号:CN201911018354.8

    申请日:2019-10-24

    Abstract: 本申请公开了一种语音处理方法、装置和电子设备,涉及语音技术领域。具体实现方案为:通过自注意力模型对输入文本进行语义解析,以得到所述输入文本的文本语义信息;基于所述文本语义信息执行所述输入文本的N个语音任务,其中,执行每个语音任务的输入均包括所述文本语义信息,所述N为大于或者等于1的整数。本申请可以达到提高语音合成前端的可靠性的技术效果。

    韵律预测方法、装置、设备和介质

    公开(公告)号:CN110797005B

    公开(公告)日:2022-06-10

    申请号:CN201911072965.0

    申请日:2019-11-05

    Abstract: 本申请实施例公开了一种韵律预测方法、装置、设备和介质,涉及数据处理领域,尤其涉及语音合成技术。该方法包括:对待预测的中英混合文本进行切分,得到中文文本和英文文本;确定中文文本中文字的字向量和英文文本中单词的词向量;根据确定的字向量和词向量,确定所述中英混合文本的韵律预测结果。本申请实施例提供了一种韵律预测方法、装置、设备和介质,提高了对中英混合文本的韵律预测准确率。

    语言模型预训练方法和装置

    公开(公告)号:CN110941945A

    公开(公告)日:2020-03-31

    申请号:CN201911214094.1

    申请日:2019-12-02

    Abstract: 本申请公开了语言模型预训练方法和装置。该方法的一具体实施方式包括:获取初始语言模型,初始语言模型用于确定输入到初始语言模型的文本数据中包含的字之间的关联关系;获取训练初始语言模型的训练样本集,训练样本集中的训练样本包括样本数据、第一标注信息和第二标注信息;将样本数据作为输入,将第一标注信息作为与初始语言模型的第一输出端连接的初始去噪自编码模型的期望输出,并将第二标注信息作为与初始语言模型的第二输出端连接的初始序列到序列模型的期望输出,对初始语言模型、初始去噪自编码模型和初始序列到序列模型进行预训练,得到训练后的语言模型。该实施方式可以显示捕获文本的音韵信息,有效提升了语言模型输出文本的语义表示效果。

    基于深度神经网络的多音字读音的判别方法和装置

    公开(公告)号:CN107729313A

    公开(公告)日:2018-02-23

    申请号:CN201710876713.8

    申请日:2017-09-25

    Inventor: 聂志朋 徐扬凯

    CPC classification number: G06F17/2765 G06N3/08

    Abstract: 本申请提出一种基于深度神经网络的多音字读音的判别方法和装置,其中,上述基于深度神经网络的多音字读音的判别方法包括:对待识别文本中的每个汉字进行量化编码,生成所述汉字的特征向量;根据汉字的特征向量,结合所述汉字的双方向的上下文信息,生成汉字的输入特征;将所述汉字的输入特征分别输入声母、韵母和声调对应的DNN模型,分别获得第一概率、第二概率和第三概率;根据第一概率、第二概率和第三概率计算声母、韵母和声调的各种组合的概率,以概率最高的组合作为所述汉字的读音。本申请可以提高读音判别的准确性,有效缓解多音字高频音引起的训练样本不均衡的问题,并且可以解决多个多音字的读音判别问题,有利于语音合成系统的集成。

    韵律停顿等级预测的校正方法、装置、设备和介质

    公开(公告)号:CN110853613B

    公开(公告)日:2022-04-26

    申请号:CN201911119829.2

    申请日:2019-11-15

    Inventor: 聂志朋 陈昌滨

    Abstract: 本申请公开了一种韵律停顿等级预测的校正方法、装置、设备和介质,涉及韵律停顿等级预测技术。具体实现方案为:获取输入文本的韵律停顿等级的初始预测结果序列;获取所述初始预测结果序列的状态向量,其中,状态向量用于表示所述初始预测结果序列中各元素之间的依赖关系;将所述输入文本的语义向量与所述状态向量进行融合,得到融合向量;将所述融合向量输入条件随机场网络,得到校正后的预测结果序列。本申请实施例将语义向量与状态向量融合后再进行CRF,由于状态向量能表示预测结果序列中各元素之间的依赖关系,因此融合后不仅结合了语义信息,还结合了预测结果序列中各元素之间的依赖关系,从而提高CRF输出的最终校正后的预测结果序列的准确度。

    一种语音处理方法、装置和电子设备

    公开(公告)号:CN110767212B

    公开(公告)日:2022-04-26

    申请号:CN201911018354.8

    申请日:2019-10-24

    Abstract: 本申请公开了一种语音处理方法、装置和电子设备,涉及语音技术领域。具体实现方案为:通过自注意力模型对输入文本进行语义解析,以得到所述输入文本的文本语义信息;基于所述文本语义信息执行所述输入文本的N个语音任务,其中,执行每个语音任务的输入均包括所述文本语义信息,所述N为大于或者等于1的整数。本申请可以达到提高语音合成前端的可靠性的技术效果。

    韵律预测方法、装置、设备和介质

    公开(公告)号:CN110797005A

    公开(公告)日:2020-02-14

    申请号:CN201911072965.0

    申请日:2019-11-05

    Abstract: 本申请实施例公开了一种韵律预测方法、装置、设备和介质,涉及数据处理领域,尤其涉及语音合成技术。该方法包括:对待预测的中英混合文本进行切分,得到中文文本和英文文本;确定中文文本中文字的字向量和英文文本中单词的词向量;根据确定的字向量和词向量,确定所述中英混合文本的韵律预测结果。本申请实施例提供了一种韵律预测方法、装置、设备和介质,提高了对中英混合文本的韵律预测准确率。

    一种模型训练方法、装置、电子设备及存储介质

    公开(公告)号:CN110782883A

    公开(公告)日:2020-02-11

    申请号:CN201911100649.X

    申请日:2019-11-12

    Abstract: 本申请公开了一种模型训练方法、装置、电子设备及存储介质,涉及模型训练领域。具体实现方案为:在第一阶段的微调训练中,将各个第一样本类型的训练样本输入至待训练模型的共享层模块中;基于各个第一样本类型的训练样本对共享层模块中的模型参数进行调整;通过共享层模块将各个第一样本类型的训练样本输入至待训练模型的各个任务类型对应的任务层模块中;通过各个任务层模块提取出自身匹配的训练数据;并基于各个任务层模块匹配的训练数据对各个任务层模块中的模型参数进行调整。本申请实施例不仅可以统一对共享层模块进行训练,而且还可以单独对各个任务层模块进行训练,在提升单任务性能的同时保留多任务训练的效果。

Patent Agency Ranking