一种基于云的元宇宙应用的发布及管理方法及装置

    公开(公告)号:CN117149178A

    公开(公告)日:2023-12-01

    申请号:CN202311417109.0

    申请日:2023-10-30

    摘要: 本申请提供一种基于云的元宇宙应用的发布及管理方法及装置,包括:利用UnrealEngine5开发应用模板,以UE插件的形式为每个模板设定标准的底层能力;通过所述应用模板,并依赖上述底层能力,将应用的客户端或资产上传到应用市场;客户端被存储到对象存储中,资产被存储到MySQL数据库中;通过同步程序,客户端分发到云渲染服务器上进行部署,以供用户使用。本申请使开发者在开发者平台进行一次操作即可将应用发布到多个平台。此外,资产数据和应用文件分别存储在MySQL数据库和对象存储中,并通过同步程序分发到各台云渲染服务器,开发者可以在统一的环境中管理应用和数据,简化了应用发布和管理。

    一种文字驱动数字人生成视频的方法和装置

    公开(公告)号:CN117058286A

    公开(公告)日:2023-11-14

    申请号:CN202311322110.5

    申请日:2023-10-13

    摘要: 本申请提供一种文字驱动数字人生成视频的方法及装置,包括:对输入的文本内容进行清洗和标准化,对文本内容提取关键信息、识别实体;对进行情感极性标注以确定情感倾向;基于关键信息和实体,生成与文本内容相关的虚拟场景,并根据情感倾向,选择不同的背景颜色、光照和环境设置;创建数字人主播,将生成的数字人放置在虚拟场景中;根据情感倾向,生成数字人的面部表情和动作;根据文本内容生成语音;将数字人的动作、面部表情、语音和数字人嘴型同步;根据虚拟场景、数字人、同步、面部表情和动作的信息生成视频,并在场景切换和镜头变化时,添加过渡效果,生成最终视频。本申请基于文字内容直接驱动数字人生成视频,提高了视频生成效率。

    基于云渲染进行AR虚拟拍摄的方法、系统及客户端

    公开(公告)号:CN116939362A

    公开(公告)日:2023-10-24

    申请号:CN202310787887.2

    申请日:2023-06-29

    摘要: 本发明涉及AR虚拟拍摄技术领域,具体涉及一种基于云渲染进行AR虚拟拍摄的方法、系统及客户端,旨在降低硬件成本并摆脱平台限制。本发明提出的基于云渲染进行AR虚拟拍摄的方法,适用于AR拍摄客户端,所述方法包括:接收导演端上传的场景画面和运镜指令;接收演员端上传的表演数据;将虚拟数字人放置于场景画面中,并根据运镜指令和表演数据进行实时渲染;将渲染后生成的视频分别实时发送到导演端和演员端;其中,AR拍摄客户端设置于云渲染服务器的容器中;导演端和演员端均为移动终端。本发明只需要利用普通的手机或平板电脑,就能在云上获得高质量的AR虚拟拍摄体验,从而有效降低硬件投入成本,且不受任何平台限制。

    一种基于iOS面部捕捉驱动数字人的校准方法

    公开(公告)号:CN116188741A

    公开(公告)日:2023-05-30

    申请号:CN202211613654.2

    申请日:2022-12-15

    IPC分类号: G06T19/20 G06V40/16

    摘要: 本发明提出了一种基于iOS面部捕捉驱动数字人的校准方法,包括:采集记录点的最小面部数据;采集记录点的最大面部数据;在进行最小值校准时,采集若干记录点的面部表情数据,并按照最小值校准公式进行计算,得到该记录点对应的最小值校准结果;在进行最大值校准时,采集若干记录点的面部表情数据,并按照最大值校准公式进行计算,得到该记录点对应的最大值校准结果;在进行实际面部捕捉时,采集若干记录点的面部表情数据,并按照表情校准公式进行计算,得到该记录点对应的表情校准结果;借由上述方法的校准过程操作简单、执行效率高、硬件成本低。

    一种对象复用方法、装置、客户端及存储介质

    公开(公告)号:CN115883496A

    公开(公告)日:2023-03-31

    申请号:CN202211483355.1

    申请日:2022-11-24

    摘要: 本申请涉及数据处理技术的领域,尤其是涉及一种对象复用方法、装置、客户端及存储介质,该方法包括获取待进行通讯的消息对象;查找链表复用池中是否存在待进行通讯的消息对象,链表复用池中存储有至少一个之前进行通讯所利用的消息对象;若存在,则从链表复用池中调取待进行通讯的消息对象;发送调取出的待进行通讯的消息对象。本申请具有降低计算机的压力以及提高消息处理效率。

    一种支持跨应用调用的数字人创建系统

    公开(公告)号:CN115629895B

    公开(公告)日:2023-03-21

    申请号:CN202211659927.7

    申请日:2022-12-23

    IPC分类号: G06F9/54

    摘要: 本发明提出了一种支持跨应用调用的数字人创建系统,所述数字人创建系统由应用侧的若干应用程序、数字人创建组件以及云端侧的用户数据管理模块、应用程序管理模块、数字人资产管理模块、数字人创建模块、云渲染服务模块组成;所述数字人创建系统进行数字人创建包括:当所述数字人创建组件得到用户创建数据后,调用所述数字人创建模块进行数字人渲染,得到数字人渲染数据;所述数字人创建组件将所述数字人渲染数据借由所述数字人资产管理模块返回给应用侧;借由上述方法可实现数字人在多端不同应用程序的实时调用和运行。

    一种虚拟数字人的交互方法及其系统

    公开(公告)号:CN115082603A

    公开(公告)日:2022-09-20

    申请号:CN202210745099.2

    申请日:2022-06-27

    摘要: 本申请公开了一种虚拟数字人的交互方法及其系统,其中虚拟数字人的交互方法具体包括以下子步骤:获取虚拟数字人的表情动作;根据获取的虚拟数字人的表情动作构建表情动作库;响应于构建完成表情动作库,获取虚拟数字人的实时表情动作;根据虚拟数字人的实时表情动作为虚拟数字人添加特效。本申请通过表情动作库的建立与深度学习技术的结合,解决了目前因虚拟角色人物模型面部表情参数、身体动作参数多,出现识别错误,捕捉不全面,影响虚拟人物表情、动作生成的问题,从而提高了表情动作识别的准确率。

    一种数字人的处理方法及装置
    9.
    发明公开

    公开(公告)号:CN115063516A

    公开(公告)日:2022-09-16

    申请号:CN202210753409.5

    申请日:2022-06-29

    IPC分类号: G06T13/40 G06T19/20

    摘要: 本申请涉及本申请涉及数字人的领域,尤其是涉及一种数字人的处理方法及装置。其包括:获取基础人脸模型;确定基础人脸模型数据,所述基础人脸模型数据通过分解基础人脸模型获得;获取预设的自定义人脸模型数据;基于所述自定义人脸模型数据修改所述基础人脸模型数据,获得当前基础人脸模型数据;组合所述当前基础人脸模型数据,获得当前基础人脸模型,以便于根据所述当前基础人脸模型获得数字人脸。本申请具有提升在数字人人脸构建时的便捷性,提升数字人人脸处理的速度,提升数字人的生产速度的效果。

    创建与编辑BlendShape节点的方法、装置、存储介质及电子设备

    公开(公告)号:CN117237487A

    公开(公告)日:2023-12-15

    申请号:CN202311515276.9

    申请日:2023-11-15

    IPC分类号: G06T13/20

    摘要: 本申请涉及一种创建与编辑BlendShape节点的方法、装置、存储介质及电子设备,其中方法包括:创建预设基础网格对应的初始BlendShape节点,所述预设基础网格为已有蒙皮绑定的基础网格;读取导入的目标模型的目标网格数据,根据所述目标网格数据确定所述目标模型的表情形状对应的目标表情,所述目标表情为预设的表情库中的一种;通过所述初始BlendShape节点创建所述目标表情对应的目标形状,并将所述预设基础网格当前的形状转换为所述目标形状;重复执行所述读取导入的目标模型的目标网格数据的步骤,直到所述表情库中的所有表情遍历完成。本申请具有提升基础网格在不同形状下创建和编辑BlendShape节点的效率的效果。