一种基于类脑注意机制优化机器阅读理解能力的方法

    公开(公告)号:CN114861643B

    公开(公告)日:2025-03-21

    申请号:CN202210364206.7

    申请日:2022-04-07

    Abstract: 本发明公开了一种基于类脑注意机制优化机器阅读理解能力的方法,该方法通过认知科学实验采集阅读眼动数据,以注视时长作为指标,量化人脑的阅读注意分布;提取自下而上的文本特征、视觉特征和自上而下的问题相关特征,采用线性回归方法拟合人脑阅读注意分布;最后通过最大化模型准确率和最小化注意力模型输出层单词注意权重与人脑单词注意分布估计值的交叉熵损失函数,利用反向传播更新阅读理解模型参数得到最优模型注意机制。本发明既有效提升了机器阅读理解任务的准确性,又可以用于解释模型阅读理解行为,为机器阅读理解系统进一步优化提供基础。

    一种基于多专家混合网络的多任务预测性维护方法

    公开(公告)号:CN115409217B

    公开(公告)日:2023-09-26

    申请号:CN202211352910.7

    申请日:2022-11-01

    Abstract: 本发明公开一种基于多专家混合网络的多任务预测性维护方法,包括:步骤S1:将设备的传感器数据处理成传感器特征张量,输入多专家网络模块,计算得到相应的专家子网络张量;步骤S2:将传感器特征张量输入多任务门控网络,得到多任务门控网络输出向量;步骤S3:对于每个任务,结合对应多任务门控网络输出向量,对多专家网络模块中各个专家子网络的输出作加权求和,计算得到每个任务的编码器张量;步骤S4:将计算得到的编码器张量输入任务相关的解码器网络,再通过多个任务联合优化,同时计算并输出预测性维护场景各个子任务的目标值。本发明解决了错误传递问题,可以缓解跷跷板效应,减小预测性维护任务的计算成本,提升预测效率。

    一种语音识别方法、装置、设备及可读存储介质

    公开(公告)号:CN116312480B

    公开(公告)日:2025-05-23

    申请号:CN202310126931.5

    申请日:2023-02-10

    Abstract: 本说明书公开了一种语音识别方法、装置、设备及可读存储介质,响应于流式语音识别请求,根据预设的时长,将连续接收的所述待识别音频数据,划分为待识别语音块,将各待识别语音块依次输入预训练的语音识别模型,通过特征提取子网得到第一语音特征,将该待识别语音块的第一语音特征和指定语音块的第一语音特征输入到特征编码子网,通过注意力编码层得到第一注意力得分和第二注意力得分,进而确定出该待识别语音块的第二语音特征,将第二语音特征输入解码器,确定该待识别语音块的预测文本。可见,通过特征编码子网中的注意力编码层确定第一注意力得分和第二注意力得分的方式,能够有效利用声学上下文的信息,提高文本预测的准确性。

    一种基于多专家混合网络的多任务预测性维护方法

    公开(公告)号:CN115409217A

    公开(公告)日:2022-11-29

    申请号:CN202211352910.7

    申请日:2022-11-01

    Abstract: 本发明公开一种基于多专家混合网络的多任务预测性维护方法,包括:步骤S1:将设备的传感器数据处理成传感器特征张量,输入多专家网络模块,计算得到相应的专家子网络张量;步骤S2:将传感器特征张量输入多任务门控网络,得到多任务门控网络输出向量;步骤S3:对于每个任务,结合对应多任务门控网络输出向量,对多专家网络模块中各个专家子网络的输出作加权求和,计算得到每个任务的编码器张量;步骤S4:将计算得到的编码器张量输入任务相关的解码器网络,再通过多个任务联合优化,同时计算并输出预测性维护场景各个子任务的目标值。本发明解决了错误传递问题,可以缓解跷跷板效应,减小预测性维护任务的计算成本,提升预测效率。

    一种语音识别方法、装置、设备及可读存储介质

    公开(公告)号:CN116312480A

    公开(公告)日:2023-06-23

    申请号:CN202310126931.5

    申请日:2023-02-10

    Abstract: 本说明书公开了一种语音识别方法、装置、设备及可读存储介质,响应于流式语音识别请求,根据预设的时长,将连续接收的所述待识别音频数据,划分为待识别语音块,将各待识别语音块依次输入预训练的语音识别模型,通过特征提取子网得到第一语音特征,将该待识别语音块的第一语音特征和指定语音块的第一语音特征输入到特征编码子网,通过注意力编码层得到第一注意力得分和第二注意力得分,进而确定出该待识别语音块的第二语音特征,将第二语音特征输入解码器,确定该待识别语音块的预测文本。可见,通过特征编码子网中的注意力编码层确定第一注意力得分和第二注意力得分的方式,能够有效利用声学上下文的信息,提高文本预测的准确性。

    一种给出置信度的垂直领域检索方法与装置

    公开(公告)号:CN115033594B

    公开(公告)日:2022-11-18

    申请号:CN202210953656.X

    申请日:2022-08-10

    Abstract: 本发明提供了一种给出置信度的垂直领域检索方法和装置,方法包括在初次启动检索引擎时,生成用来将预存信息生成查询过程中所需要的第一词权重表、惩罚词权重表;对待查语句集进行处理,生成待查语句的满匹配得分表和倒排索引表;用户输入查询语句,求得该查询语句与待查语句集的匹配置信度并进行降序排列。本发明充分考虑未涵盖在特定语料库中的词汇,使用协调因子重构其词权重,并设计合理的计算公式给出令人信服的匹配置信度,从而支撑下游任务的顺利进行。

    一种给出置信度的垂直领域检索方法与装置

    公开(公告)号:CN115033594A

    公开(公告)日:2022-09-09

    申请号:CN202210953656.X

    申请日:2022-08-10

    Abstract: 本发明提供了一种给出置信度的垂直领域检索方法和装置,方法包括在初次启动检索引擎时,生成用来将预存信息生成查询过程中所需要的第一词权重表、惩罚词权重表;对待查语句集进行处理,生成待查语句的满匹配得分表和倒排索引表;用户输入查询语句,求得该查询语句与待查语句集的匹配置信度并进行降序排列。本发明充分考虑未涵盖在特定语料库中的词汇,使用协调因子重构其词权重,并设计合理的计算公式给出令人信服的匹配置信度,从而支撑下游任务的顺利进行。

    一种基于类脑注意机制优化机器阅读理解能力的方法

    公开(公告)号:CN114861643A

    公开(公告)日:2022-08-05

    申请号:CN202210364206.7

    申请日:2022-04-07

    Abstract: 本发明公开了一种基于类脑注意机制优化机器阅读理解能力的方法,该方法通过认知科学实验采集阅读眼动数据,以注视时长作为指标,量化人脑的阅读注意分布;提取自下而上的文本特征、视觉特征和自上而下的问题相关特征,采用线性回归方法拟合人脑阅读注意分布;最后通过最大化模型准确率和最小化注意力模型输出层单词注意权重与人脑单词注意分布估计值的交叉熵损失函数,利用反向传播更新阅读理解模型参数得到最优模型注意机制。本发明既有效提升了机器阅读理解任务的准确性,又可以用于解释模型阅读理解行为,为机器阅读理解系统进一步优化提供基础。

Patent Agency Ranking