-
公开(公告)号:CN112465935A
公开(公告)日:2021-03-09
申请号:CN202011301793.2
申请日:2020-11-19
Applicant: 科大讯飞股份有限公司
Abstract: 本发明提供一种虚拟形象合成方法、装置、电子设备和存储介质,其中方法包括:确定待合成的语音数据的语音特征,以及与所述语音特征相对应的面部表情特征;对所述语音特征和所述面部表情特征进行融合,基于融合所得的特征合成表情与所述语音数据相匹配的虚拟形象视频。本发明提供的方法、装置、电子设备和存储介质,对语音特征和面部表情特征进行融合,基于融合所得的特征合成虚拟形象视频,面部表情特征的应用使得合成虚拟形象的表情能够趋向于一致稳定,语音特征的应用降低面部表情特征的准确性对于虚拟形象合成准确性的影响,为虚拟形象合成提供更多口唇细节信息。从而保证虚拟形象视频中虚拟形象的表情能够自然匹配语音数据。
-
公开(公告)号:CN119444955A
公开(公告)日:2025-02-14
申请号:CN202510032187.1
申请日:2025-01-09
Applicant: 科大讯飞股份有限公司
Abstract: 本申请公开了一种图像渲染方法、装置、设备和存储介质,该方法包括:获取三维点云,三维点云包括多个三维点,三维点的属性包括位置属性和色彩相关属性,色彩相关属性包括颜色信息,还包括透明度和反射率中的至少一者;从三维点云中确定目标视角下的渲染图中各像素点分别对应的点集;基于各像素点对应的点集中三维点的属性,确定各像素点的像素值。上述方案,能够提升渲染效果。
-
公开(公告)号:CN114332377B
公开(公告)日:2025-01-03
申请号:CN202111675879.6
申请日:2021-12-31
Applicant: 科大讯飞股份有限公司
IPC: G06T17/00
Abstract: 本申请实施例公开了一种对象模型的确定方法和相关装置,在针对目标三维对象扫描得到非参数化模型后,使用具有驱动参数的初始参数化模型进行模型顶点扩充,以得到具有和非参数化模型接近的模型顶点数量的注册三维模型。再进行姿态对齐以得到对齐三维模型,对齐三维模型和非参数化模型处于同一姿态下,以此能够确定出相对于非参数化模型的模型顶点偏移参数,通过基于模型顶点偏移参数对该对齐三维模型的调整,得到目标三维对象的目标参数化模型,该目标参数化模型不仅具有与非参数化模型接近的外形精度,而且还具有可用于驱动的驱动参数,实现对扫描得到的高精度非参数化模型向参数化模型的自动化转化,提高了高精度参数化模型的生成效率和精度。
-
公开(公告)号:CN112686302B
公开(公告)日:2024-02-13
申请号:CN202011594625.7
申请日:2020-12-29
Applicant: 科大讯飞股份有限公司
IPC: G06V10/75
Abstract: 本申请公开了一种图像特征点匹配方法、计算机设备及存储装置。该方法包括:获取待匹配的两张目标图像;分别对每张目标图像进行特征点提取,得到每张目标图像的若干个第一特征点;确定每个第一特征点的描述子;利用描述子对两张目标图像中的第一特征点进行匹配,得到至少一组第一匹配点对;其中,每组第一匹配点对的彩色像素值满足光照一致性。上述方案,能够提高图像特征点匹配的准确度。
-
公开(公告)号:CN115393533A
公开(公告)日:2022-11-25
申请号:CN202211326575.3
申请日:2022-10-27
Applicant: 科大讯飞股份有限公司
IPC: G06T17/00
Abstract: 本申请提供一种三维点云构建方法、装置、电子设备及存储介质,所述三维点云构建方法,通过对第一分辨率的三维点云进行点云区域划分,并在划分得到的点云区域的基础上,分别对各区域的点云进行第二分辨率的三维点云重建,上述的处理过程将高精度三维点云构建过程分为低精度三维点云构建,以及对低精度三维点云进行分区域的并行高精度点云重建,有效的避免了大规模点云在重建过程中对计算机的内存和性能造成的压力,同时通过并行对多个点云区域的三维点云重建,有效的提高了三维点云的重建效率,并且能够构建得到高精度的三维点云。
-
公开(公告)号:CN114332318A
公开(公告)日:2022-04-12
申请号:CN202111679099.9
申请日:2021-12-31
Applicant: 科大讯飞股份有限公司
Abstract: 本申请公开了一种虚拟形象生成方法及其相关设备,该方法包括:在获取到待处理语音数据之后,先对该待处理语音数据进行语音特征提取,得到待使用语音特征,以使该待使用语音特征能够表示出该待处理语音数据所携带的语音信息;再根据该待使用语音特征、待使用人脸参数、以及预先构建的虚拟形象生成模型,确定该待处理语音数据对应的虚拟形象展示数据,以使该虚拟形象展示数据能够表示出与该待处理语音数据相匹配的虚拟形象,从而使得该虚拟形象能够展示出在发出该待处理语音数据时人物所呈现的脸部状态,如此能够实现自动生成虚拟形象的目的。
-
公开(公告)号:CN115690359B
公开(公告)日:2023-12-15
申请号:CN202211326541.4
申请日:2022-10-27
Applicant: 科大讯飞股份有限公司
Abstract: 本申请提供一种点云处理方法、装置、电子设备及存储介质,所述点云处理方法,包括:将目标对象的三维点云投影至预先构建的二维平面,获得所述二维平面中的与各个三维点云点对应的二维投影点;基于所述二维平面中的二维投影点,构建二维投影点网格;根据所述二维投影点网格,以及所述二维投影点与所述三维点云点之间的投影关系,获得所述三维点云的点云网格。该方法通过将三维点云投影至预先构建的二维平面,将对三维点云的点云网格构建问题转化成了二维投影点网格构建问题,并在获得二维投影点网格后,根据二维投影点与三维点云点之间的对应关系,获得三维点云的点云网格,降低了点云网格的构建难度,提高了点云网格的构建效率。
-
公开(公告)号:CN114332377A
公开(公告)日:2022-04-12
申请号:CN202111675879.6
申请日:2021-12-31
Applicant: 科大讯飞股份有限公司
IPC: G06T17/00
Abstract: 本申请实施例公开了一种对象模型的确定方法和相关装置,在针对目标三维对象扫描得到非参数化模型后,使用具有驱动参数的初始参数化模型进行模型顶点扩充,以得到具有和非参数化模型接近的模型顶点数量的注册三维模型。再进行姿态对齐以得到对齐三维模型,对齐三维模型和非参数化模型处于同一姿态下,以此能够确定出相对于非参数化模型的模型顶点偏移参数,通过基于模型顶点偏移参数对该对齐三维模型的调整,得到目标三维对象的目标参数化模型,该目标参数化模型不仅具有与非参数化模型接近的外形精度,而且还具有可用于驱动的驱动参数,实现对扫描得到的高精度非参数化模型向参数化模型的自动化转化,提高了高精度参数化模型的生成效率和精度。
-
公开(公告)号:CN117808700A
公开(公告)日:2024-04-02
申请号:CN202311858003.4
申请日:2023-12-29
Applicant: 科大讯飞股份有限公司 , 科大讯飞(苏州)科技有限公司
Abstract: 本申请实施例公开了一种三维人体重建方法、装置、设备及存储介质,在获取从不同视角采集的同一人体的图像后,对各张图像进行特征提取,得到各张图像的特征信息;基于各张图像的特征信息,对各张图像的前景和背景分别进行预测,得到各个像素的预测信息,其中,任一像素的预测信息包括:任一像素属于前景的概率,对应前景的该任一像素的深度符合的第一概率分布函数,以及对应背景的该任一像素的深度符合的第二概率分布函数。基于各张图像的像素的预测信息确定各张图像的深度图像,将各张深度图像融合,得到人体的三维点云。本申请减少了人体非参数化模型的边缘的噪声。
-
公开(公告)号:CN307949242S
公开(公告)日:2023-04-04
申请号:CN202230706378.9
申请日:2022-10-25
Applicant: 科大讯飞股份有限公司
Abstract: 1.本外观设计产品的名称:带虚拟人构建图形用户界面的显示屏幕面板。
2.本外观设计产品的用途:用于交互和显示。
3.本外观设计产品的设计要点:在于图形用户界面。
4.最能表明设计要点的图片或照片:主视图。
5.显示屏幕面板的其他视图无设计要点,故省略,省略显示屏幕面板的其他视图。
6.图形用户界面的用途:用于个性化构建3D虚拟人形象。
7.图形用户界面的人机交互方式:点击主视图中上传头像,选择头像后主视图右侧显示上传的头像图像,点击主视图中的添加声音跳转至界面变化状态图1;点击界面变化状态图1中的开始录音可以进行录音,点击试听录音以及保存使用可分别实现相应的功能;录音完毕后跳转至界面变化状态图2,点击界面变化状态图2中的重置、重置为默认以及确定可以分别实现相应的功能;点击主视图左侧的发型按钮跳转至界面变化状态图3,在界面变化状态图3中可以选择不同的发型样式和头发颜色,选择完毕后在界面变化状态图3右侧的头像图像中同步显示修改后的预览头像;点击主视图、界面变化状态图3中任意一个界面左侧的脸型按钮跳转至界面变化状态图4,调整界面变化状态图4中的各项参数可以在界面右侧同步显示修改后的预览头像;点击主视图、界面变化状态图3、界面变化状态图4中任意一个界面左侧的眉毛按钮跳转至界面变化状态图5,调整界面变化状态图5中的各项参数可以在界面右侧同步显示修改后的预览头像;点击主视图、界面变化状态图3、界面变化状态图4、界面变化状态图5中任意一个界面左侧的眼睛按钮跳转至界面变化状态图6,调整界面变化状态图6中的各项参数可以在界面右侧同步显示修改后的预览头像;点击主视图、界面变化状态图3、界面变化状态图4、界面变化状态图5、界面变化状态图6中任意一个界面左侧的鼻子按钮跳转至界面变化状态图7,调整界面变化状态图7中的各项参数可以在界面右侧同步显示修改后的预览头像;点击主视图、界面变化状态图3、界面变化状态图4、界面变化状态图5、界面变化状态图6、界面变化状态图7中任意一个界面左侧的嘴巴按钮跳转至界面变化状态图8,调整界面变化状态图8中的各项参数可以在界面右侧同步显示修改后的预览头像。
8.显示屏幕面板可用于手机、平板电脑、笔记本电脑、台式机、智能手表、美妆镜、虚拟现实设备、个人数字助理(Personal Digital Assistant,PDA)。
-
-
-
-
-
-
-
-
-