-
公开(公告)号:CN113743271B
公开(公告)日:2023-08-01
申请号:CN202110995105.5
申请日:2021-08-27
Applicant: 中国科学院软件研究所
IPC: G06V20/40
Abstract: 本发明公开一种基于多模态情感的视频内容有效性可视分析方法与系统。该方法包括:收集特定类型的视频与其有效性客观指标的标签;抽取视频中各种模态的情感数据;在抽取的情感数据的基础上,结合领域实际需求确定有效性因素,并计算得出不同有效性因素的数值;对有效性因素和有效性客观指标之间的相关性进行分析,得出有效性因素的相关性结果;将抽取得到的情感数据与有效性因素的相关性结果以不同的可视化形式进行展示,供用户进行以情感为主线的从整体到局部的多层次探索。本发明借助可视化方法对视频内容有效性进行分析,在量化视频内容有效性因素及实现客观分析方面具有优势,能够通过直观、有效的方式提供给用户具有视觉冲击力的分析结果。
-
公开(公告)号:CN113743267B
公开(公告)日:2023-06-16
申请号:CN202110980775.X
申请日:2021-08-25
Applicant: 中国科学院软件研究所
Abstract: 本发明公开了一种基于螺旋和文本的多模态视频情感可视化方法,包括:抽取目标视频在各模态下的情感数据;依据各模态下抽取情感数据的最小尺度,对齐各模态下的情感数据;基于对齐后的情感数据,进行螺旋可视化和/或文本可视化,生成情感可视化结果。本发明创新性地利用螺旋形式可视化方法与文本数据可视化方法,能够涵盖更多的多模态信息,更好地表达时序关系中的多模态信息,辅助用户更好地理解视频中的多模态情感数据,自动化实现数据可视化,具有良好的扩展性。
-
公开(公告)号:CN113743267A
公开(公告)日:2021-12-03
申请号:CN202110980775.X
申请日:2021-08-25
Applicant: 中国科学院软件研究所
Abstract: 本发明公开了一种基于螺旋和文本的多模态视频情感可视化方法,包括:抽取目标视频在各模态下的情感数据;依据各模态下抽取情感数据的最小尺度,对齐各模态下的情感数据;基于对齐后的情感数据,进行螺旋可视化和/或文本可视化,生成情感可视化结果。本发明创新性地利用螺旋形式可视化方法与文本数据可视化方法,能够涵盖更多的多模态信息,更好地表达时序关系中的多模态信息,辅助用户更好地理解视频中的多模态情感数据,自动化实现数据可视化,具有良好的扩展性。
-
公开(公告)号:CN114840107A
公开(公告)日:2022-08-02
申请号:CN202210237615.0
申请日:2022-03-11
Applicant: 中国科学院软件研究所
IPC: G06F3/0481 , G06F16/53 , G06T11/00
Abstract: 本发明公开一种草图数据重用与场景草图辅助构建方法及系统,属于计算机视觉领域,利用草图交互的高效信息表征的优势,基于草图修复以及基于草图的图像检索等草图智能处理技术,对已有的草图素材进行提取和重用;利用提取的草图素材以及数据库中存储的草图数据辅助用户进行场景草图构建,从而用于草图检索、视频定位等后续应用。
-
公开(公告)号:CN113743271A
公开(公告)日:2021-12-03
申请号:CN202110995105.5
申请日:2021-08-27
Applicant: 中国科学院软件研究所
IPC: G06K9/00
Abstract: 本发明公开一种基于多模态情感的视频内容有效性可视分析方法与系统。该方法包括:收集特定类型的视频与其有效性客观指标的标签;抽取视频中各种模态的情感数据;在抽取的情感数据的基础上,结合领域实际需求确定有效性因素,并计算得出不同有效性因素的数值;对有效性因素和有效性客观指标之间的相关性进行分析,得出有效性因素的相关性结果;将抽取得到的情感数据与有效性因素的相关性结果以不同的可视化形式进行展示,供用户进行以情感为主线的从整体到局部的多层次探索。本发明借助可视化方法对视频内容有效性进行分析,在量化视频内容有效性因素及实现客观分析方面具有优势,能够通过直观、有效的方式提供给用户具有视觉冲击力的分析结果。
-
公开(公告)号:CN111191554A
公开(公告)日:2020-05-22
申请号:CN201911347995.8
申请日:2019-12-24
Applicant: 中国科学院软件研究所
Abstract: 本发明公开一种基于隐喻地图的视频情感分析与可视化方法与系统。本发明包括:基于Ekman情感表示模型的视频情感采集工具以及情感建模,可以同时采集到较为准确的情绪类别和情绪数值两种类型的情感数据;利用隐喻地图表达视频中的情感和关系信息,在表达层次、关系信息时具有优势,同时地图的形状、色彩的搭配使其具有一定的美感;通过地图,用户可以快速直观地了解到视频的情绪变化趋势、各情感种类的占比以及视频各事件和情绪之间的关系。本发明可用于视频内容探索、查询、理解的交互式可视化分析,允许用户根据情感信息对视频进行快速地浏览,并能够直观地展现将要到来的情绪转折点或高潮,同时支持对视频中人物情绪和关系的探索。
-
公开(公告)号:CN114840107B
公开(公告)日:2023-08-01
申请号:CN202210237615.0
申请日:2022-03-11
Applicant: 中国科学院软件研究所
IPC: G06F3/0481 , G06F16/53 , G06T11/00
Abstract: 本发明公开一种草图数据重用与场景草图辅助构建方法及系统,属于计算机视觉领域,利用草图交互的高效信息表征的优势,基于草图修复以及基于草图的图像检索等草图智能处理技术,对已有的草图素材进行提取和重用;利用提取的草图素材以及数据库中存储的草图数据辅助用户进行场景草图构建,从而用于草图检索、视频定位等后续应用。
-
公开(公告)号:CN111191554B
公开(公告)日:2022-11-15
申请号:CN201911347995.8
申请日:2019-12-24
Applicant: 中国科学院软件研究所
Abstract: 本发明公开一种基于隐喻地图的视频情感分析与可视化方法与系统。本发明包括:基于Ekman情感表示模型的视频情感采集工具以及情感建模,可以同时采集到较为准确的情绪类别和情绪数值两种类型的情感数据;利用隐喻地图表达视频中的情感和关系信息,在表达层次、关系信息时具有优势,同时地图的形状、色彩的搭配使其具有一定的美感;通过地图,用户可以快速直观地了解到视频的情绪变化趋势、各情感种类的占比以及视频各事件和情绪之间的关系。本发明可用于视频内容探索、查询、理解的交互式可视化分析,允许用户根据情感信息对视频进行快速地浏览,并能够直观地展现将要到来的情绪转折点或高潮,同时支持对视频中人物情绪和关系的探索。
-
-
-
-
-
-
-