-
公开(公告)号：CN117828355A
公开(公告)日：2024-04-05
申请号：CN202410148630.7
申请日：2024-02-01
Applicant: 讯飞医疗科技股份有限公司
IPC: G06F18/214 , G06F18/213 , G06F18/25 , G06F18/2431 , G06F40/35 , G06F40/279 , G06F40/205 , G06F16/35 , G06V10/774 , G06V10/80 , G06V10/764
Abstract: 本发明涉及情绪判定技术领域，提供一种基于多模态信息的情绪定量模型训练方法及情绪定量方法，该训练方法中引入多模态特征对齐模块，可以将多模态感知能力接入大型语言模型，进而可以通过多模态信息对情绪进行定量分析。通过该训练方法得到的多模态情绪定量模型，模型参数量更多，所承载的知识量更多，具有更强的语言能力，可以充分利用多模态信息表征用户的整体状态，避免信息缺失，得到的分析结果更加准确，能够适配精神心理科场景。此外，通过构建监督微调数据集，将多模态指令遵循能力接入大型语言模型，能够理解受试者的语音特征和视频特征等多模态特征，可以提高多模态情绪定量模型对情绪进行多模态定量的性能。
-
Patent Agency Ranking
公开(公告)号：CN119650101A
公开(公告)日：2025-03-18
申请号：CN202411636085.2
申请日：2024-11-15
Applicant: 讯飞医疗科技股份有限公司
Abstract: 本说明书实施例提供了一种协同诊断方法，该方法通过获取第一对象关联的会诊信息；然后基于会诊信息触发诊断方对会诊信息进行协同诊断，以得到诊断建议，该诊断方包括第二对象和智能体，且诊断建议基于第二对象和智能体针对会诊信息交互所得；并确定诊断建议指示的执行流程；进而触发诊断方对执行流程产生的诊疗动作进行协同判断，以得到诊断结论。从而实现多方交互的协同诊断过程，通过智能体的协同工作，提供疑难症状的深度分析，以及个性化的治疗方案建议，以克服单一输入限制和信息处理能力有限的问题，提高了诊断过程的准确性。
-
公开(公告)号：CN119739824A
公开(公告)日：2025-04-01
申请号：CN202411754102.2
申请日：2024-12-02
Applicant: 讯飞医疗科技股份有限公司
IPC: G06F16/3329 , G06F40/30 , G06F40/186 , G06N3/045 , G06F16/353
Abstract: 本发明提供一种状态评估方法、装置、设备及介质，其中方法包括：接收用户对于当前轮次的评估问题的回复；基于评估问题所在的场景、回复，以及用户在状态评估中的历史对话，确定对话跳转策略和用户在场景下的情绪意图；基于对话跳转策略，从各候选对话模型中确定目标对话模型，并基于目标对话模型，生成下一轮次的评估问题，并返回接收用户对于下一轮次的评估问题的回复，直至交互结束；基于用户在各轮次的评估问题所在场景下的情绪意图，进行状态评估。本发明提供的状态评估方法、装置、设备及介质，通过对话跳转策略实现对话模式的灵活切换，提升了对话的自然流畅度，使用户在互动中获得更贴心的体验。
-
公开(公告)号：CN116415137B
公开(公告)日：2023-10-10
申请号：CN202310674488.5
申请日：2023-06-08
Applicant: 讯飞医疗科技股份有限公司 , 首都医科大学附属北京安定医院
IPC: G06F18/213 , G06F18/25 , G06F18/23 , G16H50/30 , G06N3/0464 , G06N3/08
Abstract: 本申请公开了一种基于多模态特征的情绪定量方法、装置、设备及存储介质，本申请获取到待测对象在设定谈话场景下的音频、视频数据、识别文本，该三种模态的数据全面覆盖待测对象的整体状态，所提供的信息更加丰富，为准确分析得到情绪参考数据提供了很好的数据基础。分别提取三种模态的数据的特征，得到文本特征、音频局部特征和视频局部特征，采用可学习的聚类模块分别对音频局部特征和视频局部特征进行维度压缩和聚类，获取更有价值的高维的音频全局特征和视频全局特征，将文本特征、音频全局特征和视频全局特征进行融合，并基于融合特征确定待测对象的情绪参考数据，实现了对待测对象的自动化检测，大大提升了检测效率。
-
公开(公告)号：CN116415137A
公开(公告)日：2023-07-11
申请号：CN202310674488.5
申请日：2023-06-08
Applicant: 讯飞医疗科技股份有限公司 , 首都医科大学附属北京安定医院
IPC: G06F18/213 , G06F18/25 , G06F18/23 , G16H50/30 , G06N3/0464 , G06N3/08
Abstract: 本申请公开了一种基于多模态特征的情绪定量方法、装置、设备及存储介质，本申请获取到待测对象在设定谈话场景下的音频、视频数据、识别文本，该三种模态的数据全面覆盖待测对象的整体状态，所提供的信息更加丰富，为准确分析得到情绪参考数据提供了很好的数据基础。分别提取三种模态的数据的特征，得到文本特征、音频局部特征和视频局部特征，采用可学习的聚类模块分别对音频局部特征和视频局部特征进行维度压缩和聚类，获取更有价值的高维的音频全局特征和视频全局特征，将文本特征、音频全局特征和视频全局特征进行融合，并基于融合特征确定待测对象的情绪参考数据，实现了对待测对象的自动化检测，大大提升了检测效率。
-
公开(公告)号：CN116910270A
公开(公告)日：2023-10-20
申请号：CN202310915860.7
申请日：2023-07-24
Applicant: 讯飞医疗科技股份有限公司
IPC: G06F16/36 , G06F16/335 , G06N5/022
Abstract: 本申请公开了一种多模态心理知识图谱构建方法、装置、设备及存储介质，本申请在获取到纯文本心理知识图谱后，以图谱中的实体节点所包含的文本作为检索词，检索与实体节点相关的其它模态知识信息，如语音模态、视觉模态的知识信息，计算实体节点所包含的文本，与检索到的实体节点相关的每条其它模态知识信息间的相关度，筛选出相关度满足条件的目标其它模态知识信息，将目标其它模态知识信息作为实体节点的关联信息添加到纯文本心理知识图谱中，构建多模态心理知识图谱。本申请构建的多模态心理知识图谱包含了多模态的心理学知识信息，其内容更加丰富，可以更好地满足下游应用的需求。
-
-
-
-
-
Search Results
6
records
(took 0.034 seconds)
