-
公开(公告)号:CN110890140A
公开(公告)日:2020-03-17
申请号:CN201911168168.2
申请日:2019-11-25
Applicant: 上海交通大学
Abstract: 本发明提供一种基于虚拟现实的自闭症康复训练及能力评估系统及方法,包括计算反馈主控设备和虚拟现实模块,虚拟现实模块受所述计算反馈主控设备控制,为自闭症患者模拟虚拟现实场景,引导自闭症患者与虚拟现实场景交互,通过虚拟现实技术并结合适当的内容能够将被测者的行为模式放大,并结合人工智能技术对数据进行分析处理,且能够对被测者的神经回路进行一定程度的模拟,而通过与标准对照组及自闭症对照组进行比对,可以得到综合的评估结果,并可以结合实时反馈和阶段反馈调整康复训练的内容及流程,自适应自闭症患者的当前状态。
-
公开(公告)号:CN110890140B
公开(公告)日:2022-09-23
申请号:CN201911168168.2
申请日:2019-11-25
Applicant: 上海交通大学
Abstract: 本发明提供一种基于虚拟现实的自闭症康复训练及能力评估系统及方法,包括计算反馈主控设备和虚拟现实模块,虚拟现实模块受所述计算反馈主控设备控制,为自闭症患者模拟虚拟现实场景,引导自闭症患者与虚拟现实场景交互,通过虚拟现实技术并结合适当的内容能够将被测者的行为模式放大,并结合人工智能技术对数据进行分析处理,且能够对被测者的神经回路进行一定程度的模拟,而通过与标准对照组及自闭症对照组进行比对,可以得到综合的评估结果,并可以结合实时反馈和阶段反馈调整康复训练的内容及流程,自适应自闭症患者的当前状态。
-
公开(公告)号:CN111048200A
公开(公告)日:2020-04-21
申请号:CN201911169004.1
申请日:2019-11-25
Applicant: 上海交通大学
Abstract: 本发明提供一种自闭症患者刻板行为评估系统、方法及终端,系统包括虚拟现实子系统、体姿追踪子系统和综合处理子系统,虚拟现实子系统,用于向被测者呈现虚拟现实场景并允许被测者与场景进行交互活动;体姿追踪子系统,用于采集被测者的空间位置信息和身体姿态信息并传输给综合处理模块进行处理分析;综合处理子系统,用于处理体姿数据并得到综合辅助诊断结果。本发明可以得到综合的刻板行为评估结果,提供了自闭症刻板行为量化评估指标,有助于辅助诊断自闭症。
-
公开(公告)号:CN117557481A
公开(公告)日:2024-02-13
申请号:CN202311341065.8
申请日:2023-10-16
Applicant: 上海交通大学
IPC: G06T5/90 , G06T7/00 , G06T7/90 , G06N3/0464
Abstract: 本发明提供了一种以质量为引导的人脸肤色连续可控增强方法、系统及终端,方法包括:提取人脸图像的肤色区域并进行肤色调整,通过图像质量评估模块获取调整后图像的质量分数,建立肤色图像质量评估数据库;建立基于三维查找表的图像增强网络;利用肤色图像质量评估数据库对图像增强网络进行训练,学习不同质量分数的图像的分布,获得图像增强模型;将待增强图像及目标质量分数共同输入图像增强模型,获得目标质量分数对应的增强图像,实现根据给定的质量分数对人脸肤色进行连续可控的调整。由此,本发明可以解决相关技术中只能获得固定增强结果而无法控制增强效果的问题。
-
公开(公告)号:CN113628130B
公开(公告)日:2023-10-27
申请号:CN202110829947.3
申请日:2021-07-22
Applicant: 上海交通大学
IPC: G06T5/00 , G06N3/0464 , G06N3/048 , G06N3/082
Abstract: 本发明提供一种基于深度学习的视障辅助的图像增强方法、设备和介质,包括:将卷积神经网络的输出端与模拟视障患者的视觉系统的输入端进行连接,得到级联系统;对卷积神经网络进行训练得到图像增强网络,其中:将原始图像输入卷积神经网络进行增强,将增强结果输入模拟视障患者的视觉系统进行模拟,级联系统输出为该视障症状的模拟的感知图像;计算级联系统输出和原始图像的损失,以最小化级联系统的输入输出图像间的差异为目标,对原始图像进行增强以补偿模拟的视障患者的视觉系统带来的失真。本发明得到的图像增强网络能有效地实现针对视障辅助的图像增强,实验表明针对中心视力下降的图像增强能有效改善患者的视觉功能和主观感知质量。
-
公开(公告)号:CN113628130A
公开(公告)日:2021-11-09
申请号:CN202110829947.3
申请日:2021-07-22
Applicant: 上海交通大学
Abstract: 本发明提供一种基于深度学习的视障辅助的图像增强方法、设备和介质,包括:将卷积神经网络的输出端与模拟视障患者的视觉系统的输入端进行连接,得到级联系统;对卷积神经网络进行训练得到图像增强网络,其中:将原始图像输入卷积神经网络进行增强,将增强结果输入模拟视障患者的视觉系统进行模拟,级联系统输出为该视障症状的模拟的感知图像;计算级联系统输出和原始图像的损失,以最小化级联系统的输入输出图像间的差异为目标,对原始图像进行增强以补偿模拟的视障患者的视觉系统带来的失真。本发明得到的图像增强网络能有效地实现针对视障辅助的图像增强,实验表明针对中心视力下降的图像增强能有效改善患者的视觉功能和主观感知质量。
-
公开(公告)号:CN119516566A
公开(公告)日:2025-02-25
申请号:CN202411644056.0
申请日:2024-11-18
Applicant: 上海交通大学
IPC: G06V30/413 , G06V20/40 , G06V10/54 , G06V10/80 , G06T5/50 , G06T15/20 , G06T3/4007 , G06V10/82 , G06N3/0455 , G06N3/048 , G06N3/042 , G06N3/08
Abstract: 本公开提供一种文本生成三维内容的质量评价方法、系统、介质及终端,其中,方法包括:获取文本生成三维内容的投影视频和文本提示词;将投影视频输入预训练的形状特征提取器,确定文本生成三维内容的形状特征;将投影视频输入预训练的纹理特征提取器,确定文本生成三维内容的纹理特征;将投影视频、文本提示词输入预训练的文本内容一致性特征提取器,确定文本生成三维内容的文本内容一致性特征;将形状特征、纹理特征以及文本内容一致性特征进行特征融合处理,确定文本生成三维内容的评价分数。通过本公开,有效评价文本引导的人工智能生成三维内容的总体感知质量。
-
公开(公告)号:CN117351231A
公开(公告)日:2024-01-05
申请号:CN202311384877.0
申请日:2023-10-24
Applicant: 上海交通大学
IPC: G06V10/46 , G06V10/42 , G06V10/80 , G06F18/213
Abstract: 本发明提供一种文本引导下的视觉显著性预测方法、系统、终端及介质,包括:提取图像的图像特征和图像对应的文本特征,其中文本特征包括全局文本特征和局部文本特征,利用全局特征融合模块融合全局文本特征和图像特征,通过局部特征融合模块将局部文本特征和图像特征进行融合,得到文本引导下视觉显著性预测图。在图像特征提取时,图像特征将转换为多尺度特征,之后局部特征融合模块利用这些特征融合得到多尺度信息。本发明可有效地预测文本引导下的视觉显著性图。
-
公开(公告)号:CN113628174A
公开(公告)日:2021-11-09
申请号:CN202110829098.1
申请日:2021-07-21
Applicant: 上海交通大学
Abstract: 本发明提供了一种主观及客观超声医学图像质量评价方法及系统,方法包括:对超声医学图像进行主观质量评估,每张图像给出第一质量、第二质量和第三质量的三类分类评估结果中一种;采用所述分类评估结果进行神经网络的训练,所述神经网络分别从不同所述超声医学图像中提取高维度特征,将提取的所述高维度特征进行全连接输出得到第一质量、第二质量和第三质量三类分类结果;通过不断训练得到一个准确率最高的神经网络模型;将待评价的超声医学图像输入训练得到的所述神经网络模型,得到最终的医学图像质量评价结果。本发明可以辅助医生对不合格、没有诊断意义的医疗图像进行筛选剔除。
-
公开(公告)号:CN113489971A
公开(公告)日:2021-10-08
申请号:CN202110814232.0
申请日:2021-07-19
Applicant: 上海交通大学
IPC: H04N17/00 , H04N19/587 , G06K9/62 , G06N3/04 , G06N3/08
Abstract: 本发明提供一种全参考音视频客观质量评价方法、系统及终端,所述方法包括:分别提取参考视频帧和失真视频帧的短时特征,获得视频信号的短时特征和获得音频信号的短时特征;提取视频信号和音频信号的长时特征;将视频信号和音频信号的长时特征进行融合,得到音视频客观质量评价分数;其中,在短时特征提取时,首先将视频信号按时序依次将单帧图像分割为图像小块、音频信号通过短时傅里叶变换将短音频段转换为二维语谱图,之后利用卷积神经网络从图像小块和二维语谱图提取深层语义特征。本发明可有效地评价音视频的总体感知体验质量。
-
-
-
-
-
-
-
-
-