公开(公告)号：CN116487030A

公开(公告)日：2023-07-25

申请号：CN202310400988.X

申请日：2023-04-14

Applicant: 武汉大学

Inventor： 杜博 ,  李璟瑜 ,  万国佳

IPC: G16H50/20 ,  G16H10/60 ,  G06F18/25 ,  G06F18/241 ,  G06N3/045 ,  G06N3/0464 ,  G06F18/21 ,  G06F123/02

Abstract: 本发明公开了一种基于注意力机制的多模态异步时序预测方法及装置，涉及人工智能辅助诊疗技术领域，其中，预测方法包括：获取医疗实践中的多模态数据，并对获取的多模态数据进行预处理；构建非线性的时序注意力矩阵和基于简单注意力机制的异步时序预测模块；基于异步时序预测模块，将时序注意力矩阵以及多模态数据的静态特征和时序特征输入，得到输出的静态特征和时序特征并进行拼接，基于最大池化操作得到预测结果；根据得到的预测结果与多模态数据标签之间的交叉熵损失，对时序注意力矩阵和异步时序数据预测模块进行迭代训练；基于训练完成的异步时序数据预测模块实现多模态异步时序预测。本发明有助于实现疾病的早期筛查与预防。