-
公开(公告)号:CN108986189A
公开(公告)日:2018-12-11
申请号:CN201810640630.3
申请日:2018-06-21
申请人: 珠海金山网络游戏科技有限公司 , 珠海西山居互动娱乐科技有限公司
摘要: 本发明涉及一种基于三维动画中实时多人动作捕捉并直播的方法,包括基于三维动画中的角色创建每一个三维角色模型,加入贴图文件,设置肢体动作参数;为三维模型建立和绑定骨骼模型,为预设的肢体动作准备动画,并导入至图形引擎;提取每个真实的动捕演员的骨骼数据,然后配置对应的三维角色模型;在动捕室内通过动捕设备实时采集动捕演员的动作信息,将动捕设备的数据传输到图形引擎中,然后实时渲染和驱动相应的角色模型,生成实时视频,并进行直播。本发明还相应提出一种基于三维动画中实时多人动作捕捉并直播的计算机装置、系统和计算机程序。
-
公开(公告)号:CN108961367A
公开(公告)日:2018-12-07
申请号:CN201810641244.6
申请日:2018-06-21
申请人: 珠海金山网络游戏科技有限公司 , 珠海西山居互动娱乐科技有限公司
IPC分类号: G06T13/40
CPC分类号: G06T13/40
摘要: 本发明涉及一种三维虚拟偶像直播中角色形象变形的方法、系统及装置,用于解决.创建三维虚拟偶像的3D角色模型及贴图文件;对3D角色模型进行变形,生成对应的变形动画和骨骼动画;将3D角色模型导入至3D游戏引擎;实时捕捉真实的演员动作信息,然后关联和控制3D角色模型,以及执行变形动画,将所述3D角色模型的合成动画叠加至录制的视频画面。本发明的有益效果为:通过本发明实现了在三维虚拟偶像直播中,虚拟偶像主角实时可以改变的自己的形象,而根据不同的形象可以延伸出不同的节目表演风格,提升了节目的娱乐性和可观赏性;解决了以往的三维偶像直播中,无法表现主角的变形过程,由人变为人狼的具体变形过程,成为了现实。
-
公开(公告)号:CN108848286A
公开(公告)日:2018-11-20
申请号:CN201810641234.2
申请日:2018-06-21
申请人: 珠海金山网络游戏科技有限公司 , 珠海西山居互动娱乐科技有限公司
IPC分类号: H04N5/222 , H04N21/2187 , H04N13/275
摘要: 本发明涉及一种基于威亚辅助设备的三维虚拟偶像直播方法、装置及系统,用于解决:在威亚辅助设备中的安全带安装多个标记点;将威亚辅助设备中的起重机、滑轨及吊绳部署至动作捕捉房间指定的区域;对穿戴有威亚安全带的动捕演员与三维虚拟偶像的3D角色模型进行匹配;对动捕演员的行为动作进行捕捉,采集动捕演员的行为数据并基于3D角色模型进行渲染,进而生成动画数据并通过交互直播平台进行直播。本发明的有益效果为:实现现有技术无法在虚拟偶像直播吊威亚的空白。
-
公开(公告)号:CN108810561A
公开(公告)日:2018-11-13
申请号:CN201810641475.7
申请日:2018-06-21
申请人: 珠海金山网络游戏科技有限公司 , 珠海西山居互动娱乐科技有限公司
IPC分类号: H04N21/2187 , H04N13/275 , G06T13/40 , G06F3/01
CPC分类号: H04N21/2187 , G06F3/011 , G06T13/40
摘要: 本发明涉及一种基于人工智能的三维偶像直播方法及装置,包括如下步骤:A.创建虚拟的3D人工智能偶像角色,并导入至3D图形引擎,生成用于直播的3D人工智能偶像模型;B.基于3D图形引擎进一步设计并生成3D人工智能偶像对应的角色动画,其中角色动画包括肢体动作、面部表情;C.对3D人工智能偶像进行配音;D.将所述角色动画和配音进行联调并根据玩家的互动信息进行交互直播。有益效果为:丰富了虚拟偶像直播的直播形式,无需真人演员实时表演,节省了人力成本,由人工智能生成交互反馈,能够实现不间断直播,提高了玩家体验。
-
公开(公告)号:CN108833740B
公开(公告)日:2021-03-30
申请号:CN201810640657.2
申请日:2018-06-21
申请人: 珠海金山网络游戏科技有限公司 , 广州西山居世游网络科技有限公司
IPC分类号: H04N5/222
摘要: 本发明涉及一种基于三维动画直播的实时提词方法,包括以下步骤:基于三维动画的直播场景及其对应的视角,确定三维动画实时提词器的位置;为三维动画中的三维角色模型绑定骨骼模型,为预设的肢体动作准备动画,并导入至图形引擎;在动捕室内通过设置与三维动画实时提词器相错位的动作捕捉器,并基于动作捕捉器的位置补偿实时采集动捕演员的动作数据,以匹配对应的骨骼模型;在将三维动画实时提词器连接至直播导播工作站后,开始进行直播。本发明还涉及到一种基于三维动画直播的实时提词器系统。本发明的有益效果为:通过三维动画虚拟技术,将字幕文件投射到主播的面前,使主播观看到提词的同时又能在镜头面前表现自然。
-
公开(公告)号:CN108986190A
公开(公告)日:2018-12-11
申请号:CN201810640692.4
申请日:2018-06-21
申请人: 珠海金山网络游戏科技有限公司 , 广州西山居世游网络科技有限公司
摘要: 本发明涉及一种基于三维动画中非人形角色的虚拟主播的方法,包括创建三维动画中非人形虚拟主播的三维模型,加入贴图文件,建立动作模型;将三维动画中的非人形虚拟主播的相关创建的数据文件导入到三维实时引擎中;将动捕演员匹配到非人形虚拟主播,实时捕捉真实的演员动作信息,然后关联和驱动所述非人形虚拟主播的工作模型;将非人形角色的虚拟主播的实时合成动画叠加至录制的视频画面,并直播传输。本发明还涉及到一种基于三维动画中非人形角色的虚拟主播的装置和系统。本发明的有益效果为:通过实时捕捉演员的动作甚至表情,生成三维动画中非人形角色的动作,提高了虚拟主播过程中与观众的互动性。
-
公开(公告)号:CN108833810A
公开(公告)日:2018-11-16
申请号:CN201810641288.9
申请日:2018-06-21
申请人: 珠海金山网络游戏科技有限公司 , 广州西山居世游网络科技有限公司
IPC分类号: H04N5/278 , H04N21/488
摘要: 本发明涉及一种三维虚拟偶像直播中实时生成字幕的方法,包括以下步骤:采集动捕演员的动作及语音数据,并将动作与语音进行时间关联;将采集的语音数据实时通过语音云智能识别系统进行语音识别,将语音转换为对应的字幕文本;将字幕文本发送至三维虚拟偶像直播图形工作站制作出字幕画面;将采集的动作数据与三维虚拟偶像的模型进行动作匹配生成三维动画;根据动作与语音的时间关联,将三维动画与字幕画面进行叠加处理,生成最终的播放画面。不仅适用于三维虚拟偶像直播中实时生成字幕,还可以适用于传统的网络直播、电视直播中,整个过程是通过计算机装置及程序实时完成,无需人工制作,不存在延迟的问题。
-
公开(公告)号:CN108833740A
公开(公告)日:2018-11-16
申请号:CN201810640657.2
申请日:2018-06-21
申请人: 珠海金山网络游戏科技有限公司 , 广州西山居世游网络科技有限公司
IPC分类号: H04N5/222
摘要: 本发明涉及一种基于三维动画直播的实时提词方法,包括以下步骤:基于三维动画的直播场景及其对应的视角,确定三维动画实时提词器的位置;为三维动画中的三维角色模型绑定骨骼模型,为预设的肢体动作准备动画,并导入至图形引擎;在动捕室内通过设置与三维动画实时提词器相错位的动作捕捉器,并基于动作捕捉器的位置补偿实时采集动捕演员的动作数据,以匹配对应的骨骼模型;在将三维动画实时提词器连接至直播导播工作站后,开始进行直播。本发明还涉及到一种基于三维动画直播的实时提词器系统。本发明的有益效果为:通过三维动画虚拟技术,将字幕文件投射到主播的面前,使主播观看到提词的同时又能在镜头面前表现自然。
-
公开(公告)号:CN108108026A
公开(公告)日:2018-06-01
申请号:CN201810047106.5
申请日:2018-01-18
申请人: 珠海金山网络游戏科技有限公司 , 成都西山居互动娱乐科技有限公司
IPC分类号: G06F3/01 , G06F3/0487 , G06T13/40
摘要: 本发明提供了VR虚拟现实动作捕捉系统,其包括:一动作捕捉头盔,其包括一显示屏,其用于向演员显示由后述图像处理装置合成的图像;一头部动作捕捉模块,其用于捕捉动作捕捉头盔的动作;一第一通信模块,其连接后述图像处理装置;一图像处理装置,其用于创建三维场景,并将三维场景的图像传输至动作捕捉头盔的显示屏,该图像处理装置包括一第二通讯模块,其用于与第一通讯模块进行有线或无线通讯。还提供了VR虚拟现实动作捕捉方法。能够在表演时向演员提供最终或者接近最终的画面,为演员的演出提供参考。
-
公开(公告)号:CN107197385A
公开(公告)日:2017-09-22
申请号:CN201710400135.0
申请日:2017-05-31
申请人: 珠海金山网络游戏科技有限公司 , 珠海西山居移动游戏科技有限公司
IPC分类号: H04N21/475 , H04N21/4788 , H04N21/81 , G06T13/40
CPC分类号: H04N21/475 , G06T13/40 , H04N21/4788 , H04N21/816
摘要: 本发明公开了一种实时虚拟偶像直播方法及系统,该系统包括模型创建模块、数据关联模块及直播模块。该方法包括创建得到虚拟偶像角色模型;实时采集动作者的动作数据以及声音数据,将采集到的动作数据与虚拟偶像角色模型进行关联,令虚拟偶像角色模型按照动作数据执行相应动作;将虚拟偶像角色模型和声音数据叠加至摄录的视频画面中后合成得到虚拟偶像角色视频画面,将实时生成的虚拟偶像角色视频画面进行实时直播。通过使用本发明,能消除了传统虚拟偶像无法与观众互动的问题,而且还能增加直播的互动方式,提高直播者和观众的交互体验感。本发明作为一种实时虚拟偶像直播方法及系统可广泛应用于直播领域中。
-
-
-
-
-
-
-
-
-