公开(公告)号：CN119131521A

公开(公告)日：2024-12-13

申请号：CN202411105083.0

申请日：2024-08-13

Applicant: 上海交通大学医学院附属瑞金医院

Inventor： 黄飞跃 ,  朱立峰 ,  胡伟国 ,  柏志安 ,  马勇

IPC: G06V10/774 ,  G06V10/764 ,  G06V10/82 ,  G06T7/00 ,  G06N3/09 ,  G06N5/04 ,  G06F18/24 ,  G06F40/211 ,  G06F40/30 ,  G16H15/00 ,  G06N3/0464

Abstract: 本发明公开了一种基于影像报告的异常疾病标签标注系统,包括LLM报告拆解模块，标签规则迭代模块，标签抽取模块，和神经网络模块，其中：LLM报告拆解模块，利用大语言模型语义理解能力进行影像报告文本分句；标签抽取模块，构建正则表达式规则，抽取异常标签；神经网络分类模块，利用抽取的标签与对应医学影像报告构建的异常疾病数据集，进行神经网络分类模型预测；标签规则迭代模块，根据神经网络分类模型预测结果多轮迭代修正完善正则表达式规则，直到没有新规则加入或修改为止。采用本发明可以实现更为精准的基于影像报告自动标注医学异常疾病标签的问题，克服了现有医学数据集标注困难，成本过高，耗时过长的问题。

公开(公告)号：CN117542469A

公开(公告)日：2024-02-09

申请号：CN202311517989.9

申请日：2023-11-15

Applicant: 上海交通大学医学院附属瑞金医院

Inventor： 黄飞跃 ,  马勇 ,  徐宇辰 ,  柏志安

IPC: G16H15/00 ,  G16H50/20 ,  G16H50/70 ,  G06V10/40 ,  G06F18/213

Abstract: 本公开提供一种面向多模态医学数据的诊断报告生成方法、系统及介质，其中，面向多模态医学数据的诊断报告生成方法，包括：获取多模态训练数据集，多模态训练数据集包括医学影像和文本报告；根据预设的关键字将文本报告进行拆分处理，确定阴性描述文本和阳性描述文本；将医学影像、阴性描述文本、阳性描述文本输入预训练的诊断报告生成模型中，输出损失函数；根据损失函数对预训练的诊断报告生成模型进行优化处理，确定多模态医学诊断报告生成模型；将待测的医学影像输入多模态医学诊断报告生成模型中，生成待测的医学影像对应的诊断报告。通过本公开解决模型训练阶段训练样本不均衡的问题，提高模型对医学影像中异常描述的检测能力。