-
公开(公告)号:CN116824014B
公开(公告)日:2024-06-07
申请号:CN202310787301.2
申请日:2023-06-29
Applicant: 北京百度网讯科技有限公司
IPC: G06T13/40
Abstract: 本公开提供了一种用于虚拟形象的数据生成方法、装置、电子设备和介质,涉及人工智能技术领域,具体为计算机视觉、增强现实、虚拟现实、深度学习等技术领域。方法可以包括:获得针对目标人体的位姿数据;基于所述位姿数据获得人体关节模型,所述人体关节模型包括与人体关节分别对应的两个或更多个几何体;响应于确定所述人体关节模型中的至少两个几何体之间存在碰撞,确定碰撞的所述至少两个几何体的相应的标识、运动方向以及碰撞位置;以及基于所述相应的标识、运动方向以及碰撞位置获得经更新的位姿数据,所述经更新的位姿数据用于生成针对所述目标人体的虚拟形象。
-
公开(公告)号:CN116206370B
公开(公告)日:2024-02-23
申请号:CN202310500623.4
申请日:2023-05-06
Applicant: 北京百度网讯科技有限公司
Abstract: 本发明提供了驱动信息生成、驱动方法、装置、电子设备以及存储介质,涉及人工智能技术领域,尤其涉及计算机视觉、增强现实、虚拟现实、深度学习等技术领域,可应用于元宇宙、数字人等技术领域。具体实现方案为:确定第一局部骨骼在目标时间段中至少一个时刻的第一局部骨骼旋转角度,第一局部骨骼表征对象的第一关节点和第二关节点之间的骨骼;以及根据全局骨骼旋转角度和第一局部骨骼旋转角度,生成与对象在目标时间段的动作相对应的驱动信息,全局骨骼旋转角度根据对象的对象关节点在至少一个时刻的关节点位置信息确定。
-
公开(公告)号:CN117173515A
公开(公告)日:2023-12-05
申请号:CN202311211123.5
申请日:2023-09-19
Applicant: 北京百度网讯科技有限公司
IPC: G06V10/774 , G06T17/20 , G06T19/20
Abstract: 本公开提供了用于三维模型的数据集的构建方法、模型训练方法、数据集的构建装置、模型训练装置、电子设备、存储介质和程序产品,涉及人工智能技术领域,具体为计算机视觉、增强现实、虚拟现实等技术领域,可应用于元宇宙、数字人和AIGC等场景。具体实现方案为:根据获取的人体图像建立三维人体模型;确定三维人体模型的姿态数据和形状数据,并将三维人体模型添加至场景模型中;基于三维人体模型的网格数据和场景模型的网格数据确定三维人体模型与场景模型的接触关系;以及使用人体图像、姿态数据、形状数据和接触关系构建数据集。
-
公开(公告)号:CN116092120B
公开(公告)日:2023-12-05
申请号:CN202211738389.0
申请日:2022-12-30
Applicant: 北京百度网讯科技有限公司
Abstract: 本公开提供了一种基于图像的动作确定方法、装置、电子设备及存储介质,涉及人工智能技术领域,具体涉及计算机视觉、增强现实、虚拟现实、深度学习等技术领域,可应用于虚拟数字人、元宇宙等应用场景中。具体实现方案为:获取人体的图像,其中,图像包括:脚部关键点和待处理关键点;确定脚部关键点的参考点位置,并确定待处理关键点的待处理点位置;如果图像指示脚部触地状态,则根据参考点位置处理待处理点位置,得到待处理关键点的目标点位置;以及根据参考点位置和目标点位置,确定人体的目标动作。能够有效提升基于图像所感知人体的关键点的精度,提升动作确定准确度,提升基于图像的动作确定效果。
-
公开(公告)号:CN117078817A
公开(公告)日:2023-11-17
申请号:CN202311070010.8
申请日:2023-08-23
Applicant: 北京百度网讯科技有限公司
Abstract: 本公开提供了一种视频生成方法、装置、设备和介质,涉及人工智能技术领域,具体为计算机视觉、增强现实、虚拟现实、深度学习等技术领域。具体实现方案为:对目标人物角色在待处理视频中的目标视频帧集合进行图像特征提取得到图像特征序列,并根据所述图像特征序列提取所述目标人物角色的动作数据和表情数据;将所述动作数据和表情数据应用于目标动画角色,生成目标动画序列;基于所述待处理视频中的所述目标人物角色,将所述目标动画序列与所述待处理视频合并,生成目标视频。
-
公开(公告)号:CN115880776A
公开(公告)日:2023-03-31
申请号:CN202211617345.2
申请日:2022-12-13
Applicant: 北京百度网讯科技有限公司
Abstract: 本公开提供了一种关键点信息的确定方法和离线动作库的生成方法、装置,涉及人工智能领域,具体涉及增强现实、虚拟现实、计算机视觉和深度学习等技术领域,可应用于元宇宙和虚拟数字人等场景。关键点信息的确定方法的具体实现方案为:根据识别目标对象在当前图像帧中的当前动作姿态得到的第一关键点信息,预测目标对象在在后图像帧中的动作姿态,得到预测动作姿态的关键点信息;根据第一关键点信息和预测动作姿态的关键点信息,确定与当前图像帧对应的第一动作特征;确定离线动作库中与第一动作特征之间的特征距离小于距离阈值的目标动作特征;根据目标对象在目标动作特征所对应图像帧中动作姿态的第二关键点信息,确定当前动作姿态的关键点信息。
-
公开(公告)号:CN117274783A
公开(公告)日:2023-12-22
申请号:CN202311204606.2
申请日:2023-09-18
Applicant: 北京百度网讯科技有限公司
Abstract: 本公开提供了一种基于动作捕捉的数据处理方法、装置、设备以及存储介质,涉及图像处理技术领域,尤其涉及计算机视觉、虚拟现实领域。具体实现方案为:观测动作捕捉对象得到动作捕捉对象的关节的运动参数观测量之后,对各关节的运动参数观测量,分别采用第一抖动消除算法进行处理以得到第一参考量,以及采用第二抖动消除算法进行处理以得到第二参考量。根据第一参考量和所述第二参考量之间的差异,选取与差异匹配的目标抖动消除算法对所述运动参数观测量进行修正。通过两种不同的抖动消除算法结果之间的差异,体现出动作捕捉对象的运动快慢状态,进而,基于不同的运动快慢状态选取匹配的目标抖动消除算法修正运动参数观测量,提高动作捕捉对象的动作还原度。
-
公开(公告)号:CN115880776B
公开(公告)日:2023-11-03
申请号:CN202211617345.2
申请日:2022-12-13
Applicant: 北京百度网讯科技有限公司
Abstract: 本公开提供了一种关键点信息的确定方法和离线动作库的生成方法、装置,涉及人工智能领域,具体涉及增强现实、虚拟现实、计算机视觉和深度学习等技术领域,可应用于元宇宙和虚拟数字人等场景。关键点信息的确定方法的具体实现方案为:根据识别目标对象在当前图像帧中的当前动作姿态得到的第一关键点信息,预测目标对象在在后图像帧中的动作姿态,得到预测动作姿态的关键点信息;根据第一关键点信息和预测动作姿态的关键点信息,确定与当前图像帧对应的第一动作特征;确定离线动作库中与第一动作特征之间的特征距离小于距离阈值的目标动作特征;根据目标对象在目标动作特征所对应图像帧中动作姿态的第二关键点信息,确定当前动作姿态的关键点信息。
-
公开(公告)号:CN116228867A
公开(公告)日:2023-06-06
申请号:CN202310269233.0
申请日:2023-03-15
Applicant: 北京百度网讯科技有限公司
Abstract: 本公开提供了一种位姿确定方法、装置、电子设备和介质,涉及人工智能技术领域,具体为计算机视觉、增强现实、虚拟现实、深度学习等技术领域,可应用于元宇宙、数字人等场景。位姿确定方法可以包括获得关于目标人体的第一图像帧;至少部分地基于所述第一图像帧,确定所述目标人体的第一位姿数据;确定第一人体状态,所述第一人体状态表示在所述第一图像帧中所述目标人体的足部是否接触地面;至少部分地基于所述第一人体状态确定第一平滑参数;以及基于所述第一平滑参数对所述第一位姿数据进行平滑,以获得经平滑的第一位姿数据。
-
公开(公告)号:CN117746502B
公开(公告)日:2024-11-26
申请号:CN202311766853.1
申请日:2023-12-20
Applicant: 北京百度网讯科技有限公司
Abstract: 本公开提供了图像标注方法、动作识别方法、装置和电子设备,涉及人工智能技术领域,尤其涉及计算机视觉、增强现实、虚拟现实、深度学习等技术领域,可应用于人工智能的内容生成、数字人等场景。具体实现方案为:获取预处理后的第一图像,第一图像包括用户图像;从第一图像中提取图像特征,基于提取的图像特征识别用户图像中人体部位对应的第一区域;对于每一个人体部位,在该人体部位对应的第一区域中识别该人体部位的多个第一关键点,基于多个第一关键点确定包围该人体部位的第二区域的位置信息和该人体部位的姿态信息;在第一图像中生成该人体部位的标注信息,标注信息包括姿态信息和根据第二区域得到的检测框。
-
-
-
-
-
-
-
-
-