三维虚拟偶像直播中角色形象变形的方法、系统及装置

    公开(公告)号:CN108961367A

    公开(公告)日:2018-12-07

    申请号:CN201810641244.6

    申请日:2018-06-21

    IPC分类号: G06T13/40

    CPC分类号: G06T13/40

    摘要: 本发明涉及一种三维虚拟偶像直播中角色形象变形的方法、系统及装置,用于解决.创建三维虚拟偶像的3D角色模型及贴图文件;对3D角色模型进行变形,生成对应的变形动画和骨骼动画;将3D角色模型导入至3D游戏引擎;实时捕捉真实的演员动作信息,然后关联和控制3D角色模型,以及执行变形动画,将所述3D角色模型的合成动画叠加至录制的视频画面。本发明的有益效果为:通过本发明实现了在三维虚拟偶像直播中,虚拟偶像主角实时可以改变的自己的形象,而根据不同的形象可以延伸出不同的节目表演风格,提升了节目的娱乐性和可观赏性;解决了以往的三维偶像直播中,无法表现主角的变形过程,由人变为人狼的具体变形过程,成为了现实。

    一种基于三维动画直播的实时提词器方法和装置

    公开(公告)号:CN108833740B

    公开(公告)日:2021-03-30

    申请号:CN201810640657.2

    申请日:2018-06-21

    IPC分类号: H04N5/222

    摘要: 本发明涉及一种基于三维动画直播的实时提词方法,包括以下步骤:基于三维动画的直播场景及其对应的视角,确定三维动画实时提词器的位置;为三维动画中的三维角色模型绑定骨骼模型,为预设的肢体动作准备动画,并导入至图形引擎;在动捕室内通过设置与三维动画实时提词器相错位的动作捕捉器,并基于动作捕捉器的位置补偿实时采集动捕演员的动作数据,以匹配对应的骨骼模型;在将三维动画实时提词器连接至直播导播工作站后,开始进行直播。本发明还涉及到一种基于三维动画直播的实时提词器系统。本发明的有益效果为:通过三维动画虚拟技术,将字幕文件投射到主播的面前,使主播观看到提词的同时又能在镜头面前表现自然。

    一种基于三维动画中非人形角色的虚拟主播的方法和系统

    公开(公告)号:CN108986190A

    公开(公告)日:2018-12-11

    申请号:CN201810640692.4

    申请日:2018-06-21

    IPC分类号: G06T13/40 G06T19/20 G06F3/01

    摘要: 本发明涉及一种基于三维动画中非人形角色的虚拟主播的方法,包括创建三维动画中非人形虚拟主播的三维模型,加入贴图文件,建立动作模型;将三维动画中的非人形虚拟主播的相关创建的数据文件导入到三维实时引擎中;将动捕演员匹配到非人形虚拟主播,实时捕捉真实的演员动作信息,然后关联和驱动所述非人形虚拟主播的工作模型;将非人形角色的虚拟主播的实时合成动画叠加至录制的视频画面,并直播传输。本发明还涉及到一种基于三维动画中非人形角色的虚拟主播的装置和系统。本发明的有益效果为:通过实时捕捉演员的动作甚至表情,生成三维动画中非人形角色的动作,提高了虚拟主播过程中与观众的互动性。

    一种三维虚拟偶像直播中实时生成字幕的方法及装置

    公开(公告)号:CN108833810A

    公开(公告)日:2018-11-16

    申请号:CN201810641288.9

    申请日:2018-06-21

    IPC分类号: H04N5/278 H04N21/488

    摘要: 本发明涉及一种三维虚拟偶像直播中实时生成字幕的方法,包括以下步骤:采集动捕演员的动作及语音数据,并将动作与语音进行时间关联;将采集的语音数据实时通过语音云智能识别系统进行语音识别,将语音转换为对应的字幕文本;将字幕文本发送至三维虚拟偶像直播图形工作站制作出字幕画面;将采集的动作数据与三维虚拟偶像的模型进行动作匹配生成三维动画;根据动作与语音的时间关联,将三维动画与字幕画面进行叠加处理,生成最终的播放画面。不仅适用于三维虚拟偶像直播中实时生成字幕,还可以适用于传统的网络直播、电视直播中,整个过程是通过计算机装置及程序实时完成,无需人工制作,不存在延迟的问题。

    一种基于三维动画直播的实时提词器方法和装置

    公开(公告)号:CN108833740A

    公开(公告)日:2018-11-16

    申请号:CN201810640657.2

    申请日:2018-06-21

    IPC分类号: H04N5/222

    摘要: 本发明涉及一种基于三维动画直播的实时提词方法,包括以下步骤:基于三维动画的直播场景及其对应的视角,确定三维动画实时提词器的位置;为三维动画中的三维角色模型绑定骨骼模型,为预设的肢体动作准备动画,并导入至图形引擎;在动捕室内通过设置与三维动画实时提词器相错位的动作捕捉器,并基于动作捕捉器的位置补偿实时采集动捕演员的动作数据,以匹配对应的骨骼模型;在将三维动画实时提词器连接至直播导播工作站后,开始进行直播。本发明还涉及到一种基于三维动画直播的实时提词器系统。本发明的有益效果为:通过三维动画虚拟技术,将字幕文件投射到主播的面前,使主播观看到提词的同时又能在镜头面前表现自然。

    一种VR虚拟现实动作捕捉系统和动作捕捉方法

    公开(公告)号:CN108108026A

    公开(公告)日:2018-06-01

    申请号:CN201810047106.5

    申请日:2018-01-18

    发明人: 强项 芦振华

    IPC分类号: G06F3/01 G06F3/0487 G06T13/40

    摘要: 本发明提供了VR虚拟现实动作捕捉系统,其包括:一动作捕捉头盔,其包括一显示屏,其用于向演员显示由后述图像处理装置合成的图像;一头部动作捕捉模块,其用于捕捉动作捕捉头盔的动作;一第一通信模块,其连接后述图像处理装置;一图像处理装置,其用于创建三维场景,并将三维场景的图像传输至动作捕捉头盔的显示屏,该图像处理装置包括一第二通讯模块,其用于与第一通讯模块进行有线或无线通讯。还提供了VR虚拟现实动作捕捉方法。能够在表演时向演员提供最终或者接近最终的画面,为演员的演出提供参考。