一种语音驱动虚拟人的口令理解方法

    公开(公告)号:CN113643703B

    公开(公告)日:2024-02-27

    申请号:CN202110903859.3

    申请日:2021-08-06

    Abstract: 本发明公开了一种语音驱动虚拟人的口令理解方法,包括:确定待理解口令文本;将待理解口令文本输入至口令理解模型中,得到口令理解模型输出的口令理解结果;口令理解模型包含词向量训练模块、词向量修正模块、余弦相似度计算模块三部分;词向量训练模块基于训练集采用D‑Skip‑Gram算法进行词向量学习,得到词向量空间;词向量修正模块基于虚拟人动作指令库建立语义约束条件,得到修正后的词向量空间;余弦相似度计算模块在修正后的词向量空间中计算余弦相似度,实现对口令文本的理解。本发明方法能将同一涵义不同语言表达的口令理解为同一个动作指令,使用户以自己的口语表达习惯来表示意图,有益于提升语音驱动虚拟人的用户体验感。

    基于随机人脸图像的三维人头脸模型重建方法

    公开(公告)号:CN110443885B

    公开(公告)日:2022-05-03

    申请号:CN201910647974.1

    申请日:2019-07-18

    Abstract: 本发明提供了一种基于随机人脸图像的三维人头脸模型重建方法,利用三维人脸数据库建立了人脸双线性模型和优化算法,通过二维特征点逐步分离人脸的空间姿态、相机参数以及决定人脸几何形状的身份特征和表情特征,利用拉普拉斯变形修正对生成的三维人脸模型进行调整,得到低分辨率的三维人脸模型。最后计算出人脸深度,通过高分辨率模版模型与点云模型配准实现了目标人脸的高精度三维模型重建,使重建后的人头脸模型更符合目标人头脸的形状。本发明消除人脸畸变细节的同时,保持了人脸原有的主要细节,重建效果要更精确,尤其是在人脸细节的重建上,有效减少面部细节畸变和表情影响,生成的人脸模型显示效果更真实。

    交互式虚拟漫游健身车
    3.
    发明授权

    公开(公告)号:CN109011516B

    公开(公告)日:2020-10-27

    申请号:CN201810901554.7

    申请日:2018-08-09

    Abstract: 本发明提供了一种交互式虚拟漫游健身车,涉及计算机交互应用领域,本发明包含前轮转向浮动支撑平台、后轮动阻力支撑平台和运动控制硬件电路,外部数据采集部分分别安装在前轮转向浮动支撑平台和后轮动阻力支撑平台的数据采集位置,自行车仿真骑行时,前轮转向浮动支撑平台和后轮动阻力支撑平台分别采集数据,最终实现虚拟仿真。本发明使得虚拟场景的漫游显示效果得到优化,硬件控制电路和自行车运动平台的创新设计使设备复杂度降低的同时也提高了交互性和实用性,系统具有良好的人机交互界面,设备的软硬件也具有很好的扩展性,适合进行大规模的生产加工。

    一种基于局部遮挡条件下的图像换脸方法

    公开(公告)号:CN110458752B

    公开(公告)日:2022-11-11

    申请号:CN201910647968.6

    申请日:2019-07-18

    Abstract: 本发明提供了一种基于局部遮挡条件下的图像换脸方法,输入人脸图像和目标人脸图像由二维特征点进行描述,在输入图像和目标图像上做相关人脸区域的划分,建立起人脸区域对应的像素特征函数,并在人脸区域迁移的过程中无缝融合消除拼接边界。利用图像分层叠加的思路,通过拉普拉斯金字塔重建来合成最终输出图像。本发明最终合成的图像无明显修改拼接痕迹。通过与目前图像换脸常用的泊松融合方法对比,很好的还原遮挡物体边缘的图像效果,特别是当遮挡物体在人脸区域有投射阴影的时候,遮挡物边缘区域细节与泊松融合方法对比差异明显,整体图像换脸后的图像效果协调自然,无明显瑕疵。

    一种语音驱动虚拟人的口令理解方法

    公开(公告)号:CN113643703A

    公开(公告)日:2021-11-12

    申请号:CN202110903859.3

    申请日:2021-08-06

    Abstract: 本发明公开了一种语音驱动虚拟人的口令理解方法,包括:确定待理解口令文本;将待理解口令文本输入至口令理解模型中,得到口令理解模型输出的口令理解结果;口令理解模型包含词向量训练模块、词向量修正模块、余弦相似度计算模块三部分;词向量训练模块基于训练集采用D‑Skip‑Gram算法进行词向量学习,得到词向量空间;词向量修正模块基于虚拟人动作指令库建立语义约束条件,得到修正后的词向量空间;余弦相似度计算模块在修正后的词向量空间中计算余弦相似度,实现对口令文本的理解。本发明方法能将同一涵义不同语言表达的口令理解为同一个动作指令,使用户以自己的口语表达习惯来表示意图,有益于提升语音驱动虚拟人的用户体验感。

    一种基于局部遮挡条件下的图像换脸方法

    公开(公告)号:CN110458752A

    公开(公告)日:2019-11-15

    申请号:CN201910647968.6

    申请日:2019-07-18

    Abstract: 本发明提供了一种基于局部遮挡条件下的图像换脸方法,输入人脸图像和目标人脸图像由二维特征点进行描述,在输入图像和目标图像上做相关人脸区域的划分,建立起人脸区域对应的像素特征函数,并在人脸区域迁移的过程中无缝融合消除拼接边界。利用图像分层叠加的思路,通过拉普拉斯金字塔重建来合成最终输出图像。本发明最终合成的图像无明显修改拼接痕迹。通过与目前图像换脸常用的泊松融合方法对比,很好的还原遮挡物体边缘的图像效果,特别是当遮挡物体在人脸区域有投射阴影的时候,遮挡物边缘区域细节与泊松融合方法对比差异明显,整体图像换脸后的图像效果协调自然,无明显瑕疵。

    基于随机人脸图像的三维人头脸模型重建方法

    公开(公告)号:CN110443885A

    公开(公告)日:2019-11-12

    申请号:CN201910647974.1

    申请日:2019-07-18

    Abstract: 本发明提供了一种基于随机人脸图像的三维人头脸模型重建方法,利用三维人脸数据库建立了人脸双线性模型和优化算法,通过二维特征点逐步分离人脸的空间姿态、相机参数以及决定人脸几何形状的身份特征和表情特征,利用拉普拉斯变形修正对生成的三维人脸模型进行调整,得到低分辨率的三维人脸模型。最后计算出人脸深度,通过高分辨率模版模型与点云模型配准实现了目标人脸的高精度三维模型重建,使重建后的人头脸模型更符合目标人头脸的形状。本发明消除人脸畸变细节的同时,保持了人脸原有的主要细节,重建效果要更精确,尤其是在人脸细节的重建上,有效减少面部细节畸变和表情影响,生成的人脸模型显示效果更真实。

    交互式虚拟漫游健身车
    8.
    发明公开

    公开(公告)号:CN109011516A

    公开(公告)日:2018-12-18

    申请号:CN201810901554.7

    申请日:2018-08-09

    Abstract: 本发明提供了一种交互式虚拟漫游健身车,涉及计算机交互应用领域,本发明包含前轮转向浮动支撑平台、后轮动阻力支撑平台和运动控制硬件电路,外部数据采集部分分别安装在前轮转向浮动支撑平台和后轮动阻力支撑平台的数据采集位置,自行车仿真骑行时,前轮转向浮动支撑平台和后轮动阻力支撑平台分别采集数据,最终实现虚拟仿真。本发明使得虚拟场景的漫游显示效果得到优化,硬件控制电路和自行车运动平台的创新设计使设备复杂度降低的同时也提高了交互性和实用性,系统具有良好的人机交互界面,设备的软硬件也具有很好的扩展性,适合进行大规模的生产加工。

Patent Agency Ranking