公开(公告)号：CN112884729A

公开(公告)日：2021-06-01

申请号：CN202110156174.7

申请日：2021-02-04

申请人： 北京邮电大学

发明人： 宋美娜 ,  鄂海红 ,  何佳雯 ,  张胜娟 ,  王艳辉 ,  李欢 ,  张如如

IPC分类号： G06T7/00 ,  G06K9/46 ,  G06K9/62 ,  G06N3/04 ,  G06N3/08

摘要： 本申请提出一种基于双模态深度学习的眼底疾病辅助诊断方法和装置，涉及数据处理技术领域，其中，方法包括：获取同一只眼睛的彩色眼底图像和光学相干断层扫描OCT图像；分别对彩色眼底图像和所述OCT图像进行特征提取，获取第一特征向量和第二特征向量；根据预设特征融合策略对第一特征向量和第二特征向量进行融合处理，获取目标特征向量，并将目标特征向量输入已训练的神经网络诊断模型，获取诊断结果。由此，获得不同视角的眼部体征信息，针对不同数据集、不同任务场景，选择合适的策略进行特征融合，提高眼底疾病辅助诊断的准确性。

公开(公告)号：CN112884729B

公开(公告)日：2023-08-01

申请号：CN202110156174.7

申请日：2021-02-04

申请人： 北京邮电大学

发明人： 宋美娜 ,  鄂海红 ,  何佳雯 ,  张胜娟 ,  王艳辉 ,  李欢 ,  张如如

IPC分类号： G06T7/00 ,  G06V10/40 ,  G06V10/764 ,  G06V10/82 ,  G06N3/08 ,  G06N3/04

摘要： 本申请提出一种基于双模态深度学习的眼底疾病辅助诊断方法和装置，涉及数据处理技术领域，其中，方法包括：获取同一只眼睛的彩色眼底图像和光学相干断层扫描OCT图像；分别对彩色眼底图像和所述OCT图像进行特征提取，获取第一特征向量和第二特征向量；根据预设特征融合策略对第一特征向量和第二特征向量进行融合处理，获取目标特征向量，并将目标特征向量输入已训练的神经网络诊断模型，获取诊断结果。由此，获得不同视角的眼部体征信息，针对不同数据集、不同任务场景，选择合适的策略进行特征融合，提高眼底疾病辅助诊断的准确性。