公开(公告)号：CN116168796B

公开(公告)日：2023-11-10

申请号：CN202310198891.5

申请日：2023-03-03

Applicant: 杭州电子科技大学

Inventor： 周子杰 ,  余宙 ,  俞俊 ,  朱耕蔚 ,  高梓豪

IPC: G16H15/00 ,  G06F16/25 ,  G06F16/36 ,  G06F16/332

Abstract: 本发明提出了一种基于视觉问答的医疗影像报告结构化生成方法。本发明步骤如下：1、VQA模型设计与改造。2、“问题‑状态树”设计。3、信息自动化提取。4、结构化信息整合。本发明以视觉问答技术为基础，以生成医疗影像诊断报告为目的，着眼于增强问题与模型之间的交互性，设计了以“问题‑状态树”为核心的一系列数据结构及其相互间的转化算法。本发明一定程度上降低了视觉问答技术中问题组织上的随意性，有助于VQA模型在医学影像中获取更加有效的信息。使用这种技术构建的模型具有高度的可扩展性，能够以更低的训练成本完成更为全面的业务，在实际应用中可根据具体不同的应用场景灵活生成逻辑完整、包含丰富信息的医疗影像诊断报告。

公开(公告)号：CN116168796A

公开(公告)日：2023-05-26

申请号：CN202310198891.5

申请日：2023-03-03

Applicant: 杭州电子科技大学

Inventor： 周子杰 ,  余宙 ,  俞俊 ,  朱耕蔚 ,  高梓豪

IPC: G16H15/00 ,  G06F16/25 ,  G06F16/36 ,  G06F16/332

Abstract: 本发明提出了一种基于视觉问答的医疗影像报告结构化生成方法。本发明步骤如下：1、VQA模型设计与改造。2、“问题‑状态树”设计。3、信息自动化提取。4、结构化信息整合。本发明以视觉问答技术为基础，以生成医疗影像诊断报告为目的，着眼于增强问题与模型之间的交互性，设计了以“问题‑状态树”为核心的一系列数据结构及其相互间的转化算法。本发明一定程度上降低了视觉问答技术中问题组织上的随意性，有助于VQA模型在医学影像中获取更加有效的信息。使用这种技术构建的模型具有高度的可扩展性，能够以更低的训练成本完成更为全面的业务，在实际应用中可根据具体不同的应用场景灵活生成逻辑完整、包含丰富信息的医疗影像诊断报告。