三维场景的场景数据的处理方法及装置

    公开(公告)号:CN118334207A

    公开(公告)日:2024-07-12

    申请号:CN202311056510.6

    申请日:2023-08-21

    Abstract: 本申请一些实施例提供了一种三维场景的场景数据的处理方法及装置,涉及视频处理技术领域。包括:接收显示引擎发送的目标数字人的各个数字人组件的表示方案;根据目标数字人的各个数字人组件的表示方案和目标数字人的各个数字人组件的重建数据,构建目标数字人的各个数字人组件的动态三维模型;将目标数字人的各个数字人组件的动态三维模型写入目标数字人的各个数字人组件对应的缓存器,以使显示引擎从目标数字人的各个数字人组件对应的缓存器中读取目标数字人的各个数字人组件对应的动态三维模型,根据目标数字人的各个数字人组件对应的动态三维模型进行待渲染三维场景的渲染。本申请一些实施例用于实现在场景描述框中支持数字人技术的灵活组合。

    一种场景描述文件的解析方法及装置

    公开(公告)号:CN118334198A

    公开(公告)日:2024-07-12

    申请号:CN202310383435.8

    申请日:2023-04-11

    Abstract: 本申请一些实施例提供了一种场景描述文件的解析方法及装置,涉及视频处理技术领域。包括:根据场景描述文件确定待渲染三维场景中的各个三维网格承载的各个触觉材质属性的类型;当待渲染三维场景中的目标三维网格承载的第一触觉材质属性的类型为参考时,获取目标纹理描述模块的动态图像专家组MPEG触觉纹理的中的访问器索引语法元素声明的索引值;目标纹理描述模块为第一触觉材质属性对应的纹理描述模块,根据访问器索引语法元素声明的索引值获取用于访问目标触觉媒体文件的解码数据的触觉媒体访问器的描述信息,目标触觉媒体文件为第一触觉材质属性所属的触觉媒体文件。本申请一些实施例用于实现获取类型为参考的触觉材质属性的触觉值。

    一种场景描述文件的解析方法及装置

    公开(公告)号:CN118334193A

    公开(公告)日:2024-07-12

    申请号:CN202310362214.2

    申请日:2023-04-06

    Abstract: 本申请一些实施例提供了一种场景描述文件的解析方法及装置,涉及视频处理技术领域。包括:根据场景描述文件确定待渲染三维场景中的各个三维网格承载的各个触觉材质属性的类型;当待渲染三维场景中的目标三维网格承载的第一触觉材质属性的类型为参考时,获取目标节点描述模块的MPEG触觉的媒体参考列表的目标媒体参考数组中的访问器索引语法元素声明的索引值;目标节点描述模块为包括目标三维网格的节点对应的节点描述模块,目标媒体参考数组为目标触觉媒体文件对应的媒体参考数组;根据访问器索引语法元素声明的索引值获取触觉媒体访问器的描述信息。本申请一些实施例用于实现获取类型为参考的触觉材质属性的触觉值。

    一种缓存管理方法及装置
    64.
    发明公开

    公开(公告)号:CN118334139A

    公开(公告)日:2024-07-12

    申请号:CN202310479071.3

    申请日:2023-04-27

    Abstract: 本申请一些实施例提供了一种缓存管理方法及装置,涉及视频处理技术领域。包括:接收目标缓存器的描述信息及其缓存切片的描述信息;目标缓存器为用于缓存目标媒体文件的缓存器,目标媒体文件为类型为G‑PCC编码点云的媒体文件;根据目标缓存器的描述信息创建目标缓存器;根据目标缓存器的缓存切片的描述信息对目标缓存器进行缓存切片的划分,以使媒体接入函数将目标媒体文件的解析数据写入目标缓存器中,显示引擎从目标缓存器中读取目标媒体文件的解析数据,以及基于目标媒体文件的解码数据对包括目标媒体文件的待渲染三维场景进行渲染。本申请一些实施例用于在场景描述框架中支持类型为G‑PCC编码点云的媒体文件。

    一种三维场景的渲染方法及装置
    65.
    发明公开

    公开(公告)号:CN118334138A

    公开(公告)日:2024-07-12

    申请号:CN202310479050.1

    申请日:2023-04-27

    Abstract: 本申请一些实施例提供了一种三维场景的渲染方法及装置,涉及视频处理技术领域。包括:获取待渲染三维场景的场景描述文件,待渲染三维场景中包括类型为G‑PCC编码点云的目标媒体文件;根据场景描述文件的MPEG媒体的媒体列表中目标媒体文件对应的媒体描述模块获取目标媒体文件的描述信息;向媒体接入函数发送目标媒体文件的描述信息,以使媒体接入函数对目标媒体文件进行处理获取目标媒体文件的解码数据,以及将目标媒体文件的解码数据写入目标缓存器;从目标缓存器中读取目标媒体文件的解码数据;基于目标媒体文件的解码数据对待渲染三维场景进行渲染。本申请一些实施例用于在场景描述框架中支持类型为G‑PCC编码点云的媒体文件。

    运动补偿残差确定方法、装置、终端设备及存储介质

    公开(公告)号:CN118200608A

    公开(公告)日:2024-06-14

    申请号:CN202211614426.7

    申请日:2022-12-13

    Abstract: 本申请一些实施例涉及一种运动补偿残差确定方法、装置、终端设备及存储介质,尤其涉及视频编码技术领域。包括:基于重建运动参量对历史帧的重建帧进行运动补偿,以得到重建预测帧,重建运动参量为对运动参量进行编码和解码后得到的,运动参量为基于历史帧的重建帧和当前帧确定的;基于重建运动参量对历史帧进行运动补偿,以得到原始预测帧;根据重建预测帧和当前帧,确定重建残差;根据原始预测帧和当前帧,确定原始残差;对重建残差和原始残差进行融合,得到目标融合残差。本申请一些实施例用于解决目前计算出的运动补偿残差存在失真,图像结构信息丢失或出错的问题。

    一种应用级播放器的音频硬解码方法及显示设备

    公开(公告)号:CN114095778B

    公开(公告)日:2024-05-28

    申请号:CN202010862300.6

    申请日:2020-08-25

    Inventor: 吕鹏 李斌

    Abstract: 本申请公开了一种应用级播放器的音频硬解码方法及显示设备,其配置的应用级播放器用于基于音频硬解码参数创建音频硬解码器;调用音频硬解码器对解码前音频数据进行音频硬解码处理,得到采用pbuffer结构体存储形式的解码后音频数据,将采用pbuffer结构体存储形式的后音频数据转换为采用avframe结构体存储形式的解码后音频数据,并写入音频解码后数据队列,以播放指定音视频文件。可见,本发明提供的方法及显示设备,可使应用级播放器采用硬解码方式对音频数据进行解码,可以对音效做预处理,通过解码将音频数据解码成多声道,达到增强音效的效果。

    一种播放方法、装置和电子设备

    公开(公告)号:CN115361578B

    公开(公告)日:2024-05-17

    申请号:CN202210879173.X

    申请日:2022-07-25

    Inventor: 朱宗花 李斌

    Abstract: 公开提供了一种播放方法、装置和电子设备,涉及流媒体播放技术领域,用于解决在CPU资源紧张的情况下,播放器在播放媒体资源过程中,在不同时间段,针对同一操作呈现出不同的效果,例如语音唤醒功能,在刚起播的时间段内执行语音唤醒功能可能就会出现无法唤醒或唤醒异常的问题。该方法包括:向服务器发送媒体资源的下载请求;接收服务器发送的媒体资源的资源数据;对资源数据进行预设处理,确定音频解析数据和视频数据;将音频解析数据和视频数据存储至缓存队列;从缓存队列中获取视频数据,并对视频数据进行目标处理,确定视频解析数据;基于视频解析数据,以及从缓存队列中获取的音频解析数据,播放媒体资源。

    基于目标识别的投屏媒资显示方法及虚拟显示设备

    公开(公告)号:CN118034620A

    公开(公告)日:2024-05-14

    申请号:CN202211394098.4

    申请日:2022-11-08

    Inventor: 王大勇 李斌 何灿

    Abstract: 本申请涉及虚拟显示技术领域,提供一种基于目标识别的投屏媒资显示方法及虚拟显示设备,在接收到智能终端发送的投屏请求后,对获取的双目相机采集的现实场景图像进行识别,确定智能终端的屏幕的位置信息和尺寸信息,利用屏幕的位置信息和尺寸信息,实现虚拟现实场景下虚拟镜像窗口的动态自适应调整,使得虚拟镜像窗口能够完全覆盖智能终端的屏幕,从而减小投屏过程中智能终端的屏幕显示的媒体资源,对虚拟显示设备的虚拟镜像窗口显示的媒体资源的视觉干扰,提升用户的观看体验。

    显示设备及视频播放方法
    70.
    发明公开

    公开(公告)号:CN117915133A

    公开(公告)日:2024-04-19

    申请号:CN202410033928.3

    申请日:2024-01-09

    Inventor: 吕显浩 李斌

    Abstract: 本申请提供了一种显示设备及视频播放方法,显示设备包括:显示器,设置有OSD图层和视频图层;控制器,控制器被配置为:接收目标视频的播放指令;在OSD图层创建第一画布,在视频图层创建第二画布,将第一画布和第二画布均分配给播放器;启动软解码器和硬解码器对目标视频的媒资数据进行视频解码,启动音频解码器对目标视频的媒资数据进行音频解码并在播放器中进行播放;在软解码器解码出第一视频帧序列时,根据目标视频的第一音频播放进度,在第一画布上渲染第一视频帧序列;在硬解码器解码出第二视频帧序列时,根据目标视频的第二音频播放进度,在第二画布上渲染第二视频帧序列,并隐藏OSD图层。本申请提升了视频起播体验。

Patent Agency Ranking