一种基于深度学习的骨架行为分类方法

    公开(公告)号:CN116109958A

    公开(公告)日:2023-05-12

    申请号:CN202111312125.4

    申请日:2021-11-08

    申请人: 复旦大学

    摘要: 本发明属于计算机图像处理技术领域,具体为基于深度学习的骨架行为分类方法。本发明方法包括:对已有的人类行为视频数据进行预处理,通过人体检测模型和OpenPose分别获取对应的人体检测框和人体骨架数据,作为深度学习模型的训练数据;其中骨架数据作为自适应空洞时空网络模型的输入,并得到分类结果;对训练集进行监督式学习,得到泛化的深度学习模型;然后,对识别的视频进行和模型训练时相同的预处理,然后作为输入,放进预先训练好深度学习模型里,得到行为分类的结果。实验表明,本发明方法具有很好的鲁棒性,分类准确率大大提高。

    基于深度学习的脊柱退行性病变智能康复辅助训练系统

    公开(公告)号:CN114092854A

    公开(公告)日:2022-02-25

    申请号:CN202111295019.X

    申请日:2021-11-03

    申请人: 复旦大学

    摘要: 本发明公开了一种基于深度学习的脊柱退行性病变智能康复辅助训练系统。本发明系统包括基于深度学习的中医导引术视频实时分类模块和基于人体骨架表示的视频序列划分与评估模块;前者通过获取二维人体骨架数据,作为学习模型的训练数据,进行深度学习训练,得到泛化的深度学习模型;最后得到实时帧分类结果;后者根据帧分类结果,对相同类别的骨架序列进行分割与实时纠错,将分割好的序列段与相应类别专家组视频骨架序列段进行序列对比评分。本发明系统无需医护人员的指导和干预,能够使患者随时自行进行中医导引术训练,适用于家庭及基层医疗卫生机构,能够减轻医护人员的压力,提高患者康复训练的灵活性和准确性。

    一种基于服装替换的色彩搭配评估方法

    公开(公告)号:CN108230297B

    公开(公告)日:2020-05-12

    申请号:CN201711245001.2

    申请日:2017-11-30

    申请人: 复旦大学

    发明人: 路红 刘婧源

    摘要: 本发明属于计算机图像处理技术领域,具体为基于服装替换的色彩搭配评估方法。本发明方法的步骤为:根据用户日常图片及选购服装,分别进行前景检测、中线检测;对用户图片进行人脸检测,模拟换装;提取换装后的图片色彩特征,并做聚类,利用Matsuda色彩和谐度模型,对服装色彩与肤色搭配效果(色彩和谐度)评估。本发明提出了一种基于前景检测、中线检测的换装方法,且能够对换装后的肤色与服装色彩搭配进行有效的美学评估。

    一种计算机图像的美学评估方法

    公开(公告)号:CN105787966B

    公开(公告)日:2019-05-31

    申请号:CN201610157571.5

    申请日:2016-03-21

    申请人: 复旦大学

    IPC分类号: G06T7/11 G06T5/00 G06T7/40

    摘要: 本发明属于计算机图像处理技术领域,具体涉及一种计算机图像的美学评估方法。本发明是一种基于对象区域构图特征的图像美学评估方法,其步骤为:利用BING方法检测图像对象,对BING方法得到的候选框进行聚类并优化,从而得到图像对象区域;然后针对图像对象区域利用构图特征进行美学评估,其中,对画面构图相关特征进行了整合和改进,提高了美学评估的性能。本发明方法能够对计算机图像进行有效的美学评估。

    一种多模态的学生课堂行为分析系统和方法

    公开(公告)号:CN108090857A

    公开(公告)日:2018-05-29

    申请号:CN201711469436.5

    申请日:2017-12-29

    申请人: 复旦大学

    IPC分类号: G06Q50/20 G09B5/14 G10L25/51

    摘要: 本发明属于计算机技术领域,具体为一种多模态的学生课堂行为分析系统和方法。本发明系统包括学生注意力检测模块、教师授课内容检测模块、教师授课风格检测模块和相关性分析模块;学生注意力检测模块检测学生的专注率,教师授课内容检测模块检测教师的授课内容,教师授课风格检测模块检测教师的授课风格,相关性分析模块分析学生注意力检测模块测得的学生的专注率和教师授课内容检测模块测得的教师的授课内容、以及教师授课风格检测模块测得的授课风格之间的联系;本发明对学生的专注率与音频特征、授课主题之间的相关性进行分析,能帮助教师调整授课风格,提升学生的专注率。

    一种基于视频内容缩影的增强用户体验的视频播放器

    公开(公告)号:CN101901619B

    公开(公告)日:2012-10-17

    申请号:CN201010228283.7

    申请日:2010-07-16

    申请人: 复旦大学

    发明人: 王新 路红 俞凌杰

    摘要: 本发明属于视频技术领域,具体为一种基于视频内容缩影的增强用户体验的视频播放器。该视频播放器包括缩影接收模块、缩影显示模块、附加功能模块和播放器模块,各模块又包括若干子模块。本发明引入视频内容缩影技术,视频内容缩影通过结构化视频分析,在逻辑上将一部完整的视频按照其故事情节分为许多片段,提取片段中最具代表性的一帧图片作为片段的代表;在视频主画面播放内容的同时在播放器的其它位置显示视频内容缩影。在该播放器里,用户可以通过视频内容缩影快速浏览视频,并为用户提供许多辅助功能,使观看过程更有趣。

    生成用于对象类别的区分码字的方法和设备

    公开(公告)号:CN102375986A

    公开(公告)日:2012-03-14

    申请号:CN201010253750.1

    申请日:2010-08-09

    IPC分类号: G06K9/46 G06K9/62

    摘要: 公开了一种生成用于对象类别的区分码字的方法和设备。设备包含字典生成装置,根据训练图像集生成包含码字的字典;码字分布计算装置,针对所述训练图像集中的一个子集计算所述字典的每个码字的分布,其中所述子集的每个图像包含同一类别的对象,并且标记有包含所述对象的感兴趣区域,并且所述分布包括所述子集中在感兴趣区域内包含所述码字的图像的第一数目,和在感兴趣区域外包含所述码字的图像的第二数目;和码字选择装置,从所述字典的码字中选择所述第一数目相对较高并且所述第二数目相对较低的码字,作为所述区分码字。

    基于视频的智能飞行器追踪系统

    公开(公告)号:CN101909206A

    公开(公告)日:2010-12-08

    申请号:CN201010242587.9

    申请日:2010-08-02

    申请人: 复旦大学

    IPC分类号: H04N7/18 G06T7/20 G06T7/00

    摘要: 本发明属于视频监控技术领域,具体为一种基于视频的智能飞行器追踪系统。包括安装在机场塔台上的监控摄像头及云台、转换器、视频分析模块、云台控制与分析模块、位于观察室中的显示屏;本发明利用计算机视觉特征构建实时视频监控检测模块,通过云台控制算法构建云台控制与分析模块。本发明可以自动追踪起降飞行器轨迹,降低机场对飞行器监控的人力资源的消耗,克服运动背景视频中对象提取与追踪的种种困难,利用监控视频,实现自动智能追踪录像分析,从而提高监控质量,可用于对机场中的飞行器进行起降全程追踪监控、录像和对起降行为异常分析。

    一种基于人工神经网络的超分辨率方法

    公开(公告)号:CN101639937A

    公开(公告)日:2010-02-03

    申请号:CN200910195043.9

    申请日:2009-09-03

    申请人: 复旦大学

    IPC分类号: G06T5/00 G06N3/02 G06N3/08

    摘要: 本发明属于统计模式识别与图像处理技术领域,具体为是一种基于人工神经网络的超分辨率方法。本发明利用人工神经网络,表达出低分辨率图像和高分辨率图像之间的函数映射关系,具体步骤包括创建训练集,建立BP神经网络进行训练,把训练得到的高分辨率图像按对应关系“粘贴”起来,既得超分辨率图像。本发明克服了以往以流形学习为基础的超分辨率算法耗时的缺点,得到了较好的效果。