基于数字人的交互方法、装置、设备及存储介质

    公开(公告)号:CN119065489A

    公开(公告)日:2024-12-03

    申请号:CN202310653697.1

    申请日:2023-06-02

    Inventor: 陈晓权 张欣 陈杰

    Abstract: 本申请公开了一种基于数字人的交互方法、装置、设备及存储介质,所述基于数字人的交互方法包括:在用户与数字人交互时,获取用户的第一骨骼姿态信息,并获取数字人的第二骨骼姿态信息;基于第一骨骼姿态信息和第二骨骼姿态信息,若确定数字人与用户存在姿态差异,则确定存在差异的姿态所涉及用户的目标关节点;向目标关节点对应的感应设备发送震动信号,使得目标关节点对应的感应设备产生震动反馈而不是压力反馈。本申请以震动的方式对用户进行反馈,以供用户根据所述震动反馈调整其与数字人存在差异的姿态,由于震动反馈的方式适用于用户所有人体关节部位,因此本申请能够实现在用户非四肢关节部位存在姿态差异时,进行及时准确的提醒。

    图像渲染方法、装置、电子设备、存储介质及程序产品

    公开(公告)号:CN118365766A

    公开(公告)日:2024-07-19

    申请号:CN202410790319.2

    申请日:2024-06-19

    Inventor: 张欣 陈杰 王鹏

    Abstract: 本申请实施例提供了一种图像渲染方法、装置、电子设备、存储介质及程序产品,涉及图形渲染技术领域,方法包括:针对待渲染三维场景在观测视点下的待渲染图像中的每一像素位置,基于光束投射法,确定以观测视点为起点且经过该像素位置的光线在待渲染三维场景内击中的该像素位置对应的击中点;针对该像素位置对应的每一击中点,基于各光源的第一和第二绑定关系以及该击中点的位置与非光源对象的位置之间的关系,确定各光源在该击中点处产生的光影效果;基于各光源在该击中点处产生的光影效果,计算该击中点处的像素值;基于对该像素位置对应的各击中点的像素值进行融合,得到该像素位置处的像素值。如此,能够降低人工成本,提高图像渲染的效率。

    鱼眼图像校正方法、装置及存储介质

    公开(公告)号:CN111353945B

    公开(公告)日:2023-10-20

    申请号:CN201811569853.1

    申请日:2018-12-21

    Abstract: 本申请公开了一种鱼眼图像校正方法、装置及存储介质,属于图像处理领域。所述方法包括:获取鱼眼图像,鱼眼图像的轮廓为圆形,鱼眼图像包括n个第一像素,n为正整数;基于等距投影模型确定校正投影面,校正投影面包括m个第二像素,m为正整数;根据等距投影模型的几何参数确定校正投影面中每个第二像素对应的第一像素;将校正投影面中每个第二像素对应的第一像素的像素值获取为每个第二像素的像素值,得到校正图像。本申请实施例提供的鱼眼图像校正方法可以提高鱼眼图像校正的效率。

    一种场景渲染方法及装置
    34.
    发明公开

    公开(公告)号:CN115775294A

    公开(公告)日:2023-03-10

    申请号:CN202211471298.5

    申请日:2022-11-23

    Inventor: 岳周龙 张欣 陈杰

    Abstract: 本申请实施例提供了一种场景渲染方法及装置,涉及计算机技术领域,包括:获得待渲染场景的天空参数;确定待渲染场景中的光线对应的射线,利用天空参数对射线进行步进计算,得到查找参数,其中,查找参数包括:距离地面的高度、天顶角;从预设的衰减系数表中查找查找参数对应的衰减系数,并从预设的散射系数表中查找查找参数对应的散射系数;根据天空参数、衰减系数、散射系数,计算光线的光线颜色;按照光线颜色对待渲染场景渲染。应用本申请实施例提供的方案可以减小对存储资源的消耗。

    遥感图片样本的生成方法、装置及电子设备

    公开(公告)号:CN115690004A

    公开(公告)日:2023-02-03

    申请号:CN202211259616.1

    申请日:2022-10-14

    Inventor: 李欢 张欣 陈杰

    Abstract: 本申请实施例提供了一种遥感图片样本的生成方法、装置及电子设备,其中方法包括:建立多个预设遥感目标的立体模型,得到每个预设遥感目标对应的第一模型;基于初始背景图建立对应的立体模型,得到第二模型;根据多个子区域和预设的子区域与类型的对应关系,查询每个子区域对应的目标类型;根据每个子区域对应的目标类型和每个子区域的区域面积,将每个第一模型填充至第二模型中,以生成目标模型;基于目标模型,生成对应的遥感图片样本;遥感图片样本包括虚拟遥感图片以及虚拟遥感图片的样本标注信息。以此,以初始背景图为基础,生成包括多个预设遥感目标的虚拟遥感图片,该虚拟遥感图片携带有样本标注信息,进而提高了遥感图片样本的生成效率。

    图像标注方法及装置
    36.
    发明公开

    公开(公告)号:CN114387199A

    公开(公告)日:2022-04-22

    申请号:CN202011118942.1

    申请日:2020-10-19

    Inventor: 李欢 张欣 陈杰

    Abstract: 本申请提供一种图像标注方法及装置。该方法包括:根据目标的三维模型,生成待标注图像和所述待标注图像的分割图,所述待标注图像中包含所述目标,所述分割图中包含所述待标注图像上所述目标所在区域的区域信息;根据所述区域信息,确定所述待标注图像上所述目标的标注框的位置坐标;根据所述位置坐标,在所述待标注图像上绘制所述标注框,以得到标注图像。本申请通过利用由三维模型得到的分割图上精准的区域信息,确定标注框的位置坐标,并绘制标注框,能够提高图像标注的标注框位置的精准度。

    图像生成方法、装置、设备及存储介质

    公开(公告)号:CN113724309A

    公开(公告)日:2021-11-30

    申请号:CN202110996416.3

    申请日:2021-08-27

    Inventor: 林耀冬 张欣 陈杰

    Abstract: 本申请实施例公开了一种图像生成方法、装置、设备及存储介质,属于计算机图形学领域。所述方法包括:确定三维虚拟场景的多个可视点的坐标。以目标投射图像中的每个像素点为起始点,向所述三维虚拟场景发射虚拟光子,所述目标投射图像为当前需要仿真的场景对应的投射图像。基于该多个可视点中每个可视点周围的虚拟光子的光能,确定所述多个可视点中每个可视点的亮度。基于所述多个可视点中每个可视点的亮度,生成所述三维虚拟场景对应的图像。本申请实施例通过图像生成方法自动生成三维虚拟场景对应的图像,不需要实体场景和实体设备,这降低了图像生成的成本,提高了图像生成的效率。

    一种生成字幕的方法及装置

    公开(公告)号:CN108737907A

    公开(公告)日:2018-11-02

    申请号:CN201710254051.0

    申请日:2017-04-18

    Inventor: 林耀冬 张欣 陈杰

    Abstract: 本发明实施例公开了一种生成字幕的方法及装置,属于视频领域。所述方法包括:获取待生成字符在平面坐标系中的起始位置;根据所述起始位置获取所述待生成字符包括的像素点在所述平面坐标系中的第一位置;根据所述像素点的第一位置,计算所述像素点在字幕球面上的第二位置;根据所述像素点的第二位置,在所述字幕球面上渲染所述像素点,以形成所述待生成字符。所述装置包括:获取模块、计算模块和渲染模块。本发明实施例能够显示全景视频的字幕。

    一种车辆模型的渲染方法、装置、电子设备及存储介质

    公开(公告)号:CN118864682A

    公开(公告)日:2024-10-29

    申请号:CN202411333138.3

    申请日:2024-09-23

    Inventor: 张奇 张欣 陈杰

    Abstract: 本申请公开一种车辆模型的渲染方法、装置、电子设备及存储介质,涉及图像处理技术领域,用于使得构建出的车辆模型更贴合真实的环境。该方法包括:获取车辆配置的不同视角的多个相机所拍摄的图像;将多个相机所拍摄的图像映射至环境光模型,生成环境光全景图像;其中,环境光模型包括半球模型和圆底环视模型,半球模型用于构建环境光的天空场景,圆底环视模型用于构建环境光的地面场景和车身周围场景;环境光全景图像用于表征车辆周围的环境光信息;基于车辆光照反射向量,对环境光全景图像进行采样生成环境光贴图;其中,环境光贴图用于表征车辆的表面所反射的环境光信息;基于所述环境光贴图,对所述车辆模型进行渲染。

    一种训练样本的生成方法及装置

    公开(公告)号:CN112529022B

    公开(公告)日:2024-03-01

    申请号:CN201910804634.5

    申请日:2019-08-28

    Abstract: 本申请提供一种训练样本的生成方法及装置,其中所述方法包括:建立不同类别的三维虚拟烟雾场景;针对每一类别的三维虚拟烟雾场景,将所述三维虚拟烟雾场景渲染为烟雾场景图像,并将该类别和该烟雾场景图像关联存储;将存储的各类别及其各类别对应的烟雾场景图像确定为训练样本,所述训练样本用于训练烟雾场景模型,所述烟雾场景模型用于确定输入的烟雾数据对应的烟雾场景类别,从而无需在现实中采集实际火灾的样本,极大地降低了数据采集的人力和物力成本,同时由于虚拟相机的高度可控性,无需依赖具体设备则可以实现任意拍摄角度的图像采集,提高了样本的丰富性,从而提升了模型的准确率。

Patent Agency Ranking