-
公开(公告)号:CN114840107B
公开(公告)日:2023-08-01
申请号:CN202210237615.0
申请日:2022-03-11
Applicant: 中国科学院软件研究所
IPC: G06F3/0481 , G06F16/53 , G06T11/00
Abstract: 本发明公开一种草图数据重用与场景草图辅助构建方法及系统,属于计算机视觉领域,利用草图交互的高效信息表征的优势,基于草图修复以及基于草图的图像检索等草图智能处理技术,对已有的草图素材进行提取和重用;利用提取的草图素材以及数据库中存储的草图数据辅助用户进行场景草图构建,从而用于草图检索、视频定位等后续应用。
-
公开(公告)号:CN110147797B
公开(公告)日:2021-06-01
申请号:CN201910294373.7
申请日:2019-04-12
Applicant: 中国科学院软件研究所
Abstract: 本发明公开一种基于生成式对抗网络的草图补全与识别方法和装置。本发明包括:(1)基于条件生成式对抗神经网络,针对草图相对于彩色图片语义信息稀疏的特点,利用级联策略对生成式对抗神经网络进行改进;(2)扩展草图补全网络的类别通用性,设置草图识别任务作为辅助任务,同时在网络结构中增加草图识别辅助网络;(3)将草图补全方法应用于残缺草图的识别任务、基于残缺草图的图像检索任务和草图场景编辑任务中;(6)集成草图补全方法形成草图补全应用平台,支持包括交互式草图补全、草图补全与识别、草图场景分割与补全、交互式草图补全辅助等应用功能,能够在PC、手机、平板电脑、电子白板等多种设备和终端上进行应用。
-
公开(公告)号:CN108305306A
公开(公告)日:2018-07-20
申请号:CN201810025986.6
申请日:2018-01-11
Applicant: 中国科学院软件研究所
IPC: G06T13/00
Abstract: 本发明公开了一种基于草图交互的动画数据组织方法。本方法为:1)建立面向动画数据草图表征的草图认知模型,基于该草图认知模型建立面向动画数据管理的草图用户界面;2)通过该草图用户界面,以语义网模型和资源描述框架RDF为基础定义动画数据之间的关系,建立描述动画数据关系的交互原语;3)基于情境感知技术和动画数据之间的语义关系,建立动画数据的情境模型;4)通过该草图用户界面对动画数据的情境模型进行编辑,实现对动画数据的组织。对动画数据进行高效的描述和组织,并为动画创作过程中动画数据的检索和重用提供高效的交互方式,加速交互式动画的生成过程。
-
公开(公告)号:CN114969430A
公开(公告)日:2022-08-30
申请号:CN202210429989.2
申请日:2022-04-22
Applicant: 中国科学院软件研究所
IPC: G06F16/732 , G06F16/783 , G06N3/04 , G06V10/74 , G06V10/764 , G06V10/774 , G06V10/80 , G06V10/82
Abstract: 本发明公开了一种基于草图的场景级细粒度视频检索方法及系统,属于计算机视觉领域,通过提取草图特征,构建基于外观特征和类别特征的草图空间结构图;提取视频特征,构建基于视频时序信息、外观特征和类别特征的视频时空结构图,利用自适应帧采样策略进行视频帧采样,先对视频帧稀疏采样,再利用草图‑视频关联关系模型进行视频帧筛选,利用草图‑视频检索模型中完成视频细粒度检索。本发明将出现在不同时间段的物体压缩至同一张草图中,进行场景级的视频内容概括,检索出与草图背景元素、物体外观特征与动作类型均一致的视频。
-
公开(公告)号:CN112069336A
公开(公告)日:2020-12-11
申请号:CN202010860081.8
申请日:2020-08-25
Applicant: 中国科学院软件研究所
IPC: G06F16/532 , G06F16/55 , G06F16/583 , G06K9/62 , G06N3/04 , G06N3/08
Abstract: 本发明提供一种基于场景草图的细粒度图像检索方法及系统,包括:提取场景草图与若干待检索场景图像中的图信息,分别构建场景草图与若干待检索场景图像的图结构;提取各图结构的图特征,分别计算场景草图图特征与各待检索场景图像图特征的图相似度匹配分数;依据所述图信息中的物体类别标签,分别计算场景草图图特征与各待检索场景图像图特征的交并比分数;根据图相似度匹配分数与交并比分数,分别计算场景草图与各待检索场景图像的特征空间距离,并依据各特征空间距离,获取检索结果。本发明利用图来表示场景草图和图像,不仅检索出与输入草图场景类别一致的图像,而且图像中物体细节信息也保持一致,使得检索出来的图像与输入保持布局一致性。
-
公开(公告)号:CN112069336B
公开(公告)日:2022-10-14
申请号:CN202010860081.8
申请日:2020-08-25
Applicant: 中国科学院软件研究所
IPC: G06F16/532 , G06F16/55 , G06F16/583 , G06V10/75 , G06V10/82 , G06N3/04 , G06N3/08
Abstract: 本发明提供一种基于场景草图的细粒度图像检索方法及系统,包括:提取场景草图与若干待检索场景图像中的图信息,分别构建场景草图与若干待检索场景图像的图结构;提取各图结构的图特征,分别计算场景草图图特征与各待检索场景图像图特征的图相似度匹配分数;依据所述图信息中的物体类别标签,分别计算场景草图图特征与各待检索场景图像图特征的交并比分数;根据图相似度匹配分数与交并比分数,分别计算场景草图与各待检索场景图像的特征空间距离,并依据各特征空间距离,获取检索结果。本发明利用图来表示场景草图和图像,不仅检索出与输入草图场景类别一致的图像,而且图像中物体细节信息也保持一致,使得检索出来的图像与输入保持布局一致性。
-
公开(公告)号:CN114840107A
公开(公告)日:2022-08-02
申请号:CN202210237615.0
申请日:2022-03-11
Applicant: 中国科学院软件研究所
IPC: G06F3/0481 , G06F16/53 , G06T11/00
Abstract: 本发明公开一种草图数据重用与场景草图辅助构建方法及系统,属于计算机视觉领域,利用草图交互的高效信息表征的优势,基于草图修复以及基于草图的图像检索等草图智能处理技术,对已有的草图素材进行提取和重用;利用提取的草图素材以及数据库中存储的草图数据辅助用户进行场景草图构建,从而用于草图检索、视频定位等后续应用。
-
公开(公告)号:CN108305306B
公开(公告)日:2020-08-21
申请号:CN201810025986.6
申请日:2018-01-11
Applicant: 中国科学院软件研究所
IPC: G06T13/00
Abstract: 本发明公开了一种基于草图交互的动画数据组织方法。本方法为:1)建立面向动画数据草图表征的草图认知模型,基于该草图认知模型建立面向动画数据管理的草图用户界面;2)通过该草图用户界面,以语义网模型和资源描述框架RDF为基础定义动画数据之间的关系,建立描述动画数据关系的交互原语;3)基于情境感知技术和动画数据之间的语义关系,建立动画数据的情境模型;4)通过该草图用户界面对动画数据的情境模型进行编辑,实现对动画数据的组织。对动画数据进行高效的描述和组织,并为动画创作过程中动画数据的检索和重用提供高效的交互方式,加速交互式动画的生成过程。
-
公开(公告)号:CN114969430B
公开(公告)日:2025-05-06
申请号:CN202210429989.2
申请日:2022-04-22
Applicant: 中国科学院软件研究所
IPC: G06F16/732 , G06F16/783 , G06V20/40 , G06V10/74 , G06V10/764 , G06V10/774 , G06V10/80 , G06V10/82 , G06N3/042 , G06N3/0464 , G06N3/045 , G06N3/0455
Abstract: 本发明公开了一种基于草图的场景级细粒度视频检索方法及系统,属于计算机视觉领域,通过提取草图特征,构建基于外观特征和类别特征的草图空间结构图;提取视频特征,构建基于视频时序信息、外观特征和类别特征的视频时空结构图,利用自适应帧采样策略进行视频帧采样,先对视频帧稀疏采样,再利用草图‑视频关联关系模型进行视频帧筛选,利用草图‑视频检索模型中完成视频细粒度检索。本发明将出现在不同时间段的物体压缩至同一张草图中,进行场景级的视频内容概括,检索出与草图背景元素、物体外观特征与动作类型均一致的视频。
-
公开(公告)号:CN113868448A
公开(公告)日:2021-12-31
申请号:CN202111004545.6
申请日:2021-08-30
Applicant: 中国科学院软件研究所
Abstract: 本发明公开了一种细粒度场景级基于草图的图像检索方法及系统,属于计算机视觉领域,为了解决现有基于草图的图像检索方法大多数面向单物体的、类别级的图像检索问题,扩展草图检索在实际生活中的应用,通过引入注意力机制,建立自适应的图卷积神经网络,并利用三元组网络进行草图与待检索图像的匹配,对场景草图与待检索图像在场景的全局布局、类别级与实例级三个层次上进行建模,整合各层次的信息,实现输入场景草图与图像的精准匹配。
-
-
-
-
-
-
-
-
-