基于深度学习的数字人面部驱动方法

    公开(公告)号:CN118379779B

    公开(公告)日:2024-10-22

    申请号:CN202410831374.1

    申请日:2024-06-26

    发明人: 朱光辉 赵衍维

    摘要: 本申请涉及数字人面部驱动技术领域,具体涉及基于深度学习的数字人面部驱动方法,该方法包括:采集目标数据点、模型数据点,获取各邻域数据点;获取法向量方向变异度;进而获取数字人面部方向梯度;计算各目标数据点的面部皱纹强度指数;计算面部肌肉表情强度指数,进而获取各模型数据点的脸肌区域内稀疏点云权重;基于面部肌肉表情强度指数和脸肌区域内稀疏点云权重对数字人面部进行驱动。本申请在保证计算速度的情况下提高表情驱动的真实感。

    一种语音驱动数字人的方法和系统

    公开(公告)号:CN118338092A

    公开(公告)日:2024-07-12

    申请号:CN202410750052.4

    申请日:2024-06-12

    发明人: 朱光辉 赵衍维

    摘要: 本发明公开了一种语音驱动数字人的交互方法和系统,其中该方法包括:设置关联关系,使得数字人行为音频数据、视频数据分别是人物音频数据、视频数据的一一对应的虚拟化表达;监听并识别预设语音指令,进入任务准备状态;当采集到的主播的人物行为视频数据与虚线框重合度未超过阈值,返回监听和识别预设语音指令步骤;当采集到的主播的人物行为视频数据与虚线框重合度超过阈值,则解除所述关联关系且数字人开始执行与预设语音指令对应的任务,在执行任务过程中,数字人行为音频数据、视频数据由其执行的所述任务确定。这样能够使得直播间输出内容固定、重复的情况下,提高直播任务完成效率。

    业务流数据同步处理方法和系统、电子设备和存储介质

    公开(公告)号:CN116319836B

    公开(公告)日:2023-08-01

    申请号:CN202310576865.1

    申请日:2023-05-22

    发明人: 赵衍维

    摘要: 本发明公开了一种业务流数据同步处理方法和系统、电子设备和存储介质,该方法包括在固定水域内设置数据同步节点,固定水域内的第一水面对象上传业务流数据至数据同步节点,所述业务流数据包括第一AIS系统数据及临接船舶数据,数据同步节点基于船舶标志信息在船舶状态列表中进行匹配,基于匹配结果更新船舶数据项;响应于接收到周期同步信号,多个数据同步节点向调度控制中心上传同步数据,完成船舶业务流数据同步。通过采用新的船联网数据实时填补AIS系统数据缺项,稳定地实现船舶业务流数据同步。

    基于深度学习的数字人面部驱动方法

    公开(公告)号:CN118379779A

    公开(公告)日:2024-07-23

    申请号:CN202410831374.1

    申请日:2024-06-26

    发明人: 朱光辉 赵衍维

    摘要: 本申请涉及数字人面部驱动技术领域,具体涉及基于深度学习的数字人面部驱动方法,该方法包括:采集目标数据点、模型数据点,获取各邻域数据点;获取法向量方向变异度;进而获取数字人面部方向梯度;计算各目标数据点的面部皱纹强度指数;计算面部肌肉表情强度指数,进而获取各模型数据点的脸肌区域内稀疏点云权重;基于面部肌肉表情强度指数和脸肌区域内稀疏点云权重对数字人面部进行驱动。本申请在保证计算速度的情况下提高表情驱动的真实感。

    一种船舶救援路径导航方法和系统

    公开(公告)号:CN116337083B

    公开(公告)日:2023-08-04

    申请号:CN202310573248.6

    申请日:2023-05-22

    发明人: 赵衍维

    IPC分类号: G01C21/20

    摘要: 本发明公开了一种船舶救援路径导航方法和系统,其中该方法包括:主控中心与目标地点附近的浮标设备组网;所述主控中心接收所述浮标设备注册的救援船舶在目标水域基于固定周期上报的船舶动态信息,以识别船舶类型并分配船舶序号,并将救援船舶信息加入导航列表,其中,所述主控中心还接收所述浮标设备收集并上传的水域环境信息;所述主控中心基于所述水域环境信息将所述目标水域划分为禁航区、适航区和条件适航区,并设置所述救援船舶的导航路径。如此,基于临时组网全面搜集目标水域信息,为主控中心提供救援管理和导航依据,基于更新的目标水域相关信息进行救援船舶导航,保证了救援导航的动态、灵活、安全、高效。

    一种基于BP神经网络算法的港口货物流向统计方法和系统

    公开(公告)号:CN116136989A

    公开(公告)日:2023-05-19

    申请号:CN202310395337.6

    申请日:2023-04-14

    发明人: 赵衍维

    摘要: 本发明公开了一种基于BP神经网络算法的港口货物流向统计方法和系统,首先获取港口货物清单信息,录入形成清单数据池,执行显著样本数据及模糊样本数据构造;然后确定初始化模型A=A1∪A2,取输出结果中的较高置信度输出结果;执行神经网络训练;最后进行模型测试及输出,将清单数据池中的每组样本数据对应的网络模型输出作为货物流向信息,实现货物流向信息的统计。通过上述方案,本发明能够从港口货物清单信息挖掘出与货物流向相关的有效信息;能够实现简单数据、显著参数的常规推导得到货物流向信息,也可以尽可能地从复杂数据挖掘出有效参数,从而推导得到货物流向信息,两者互证互补,高效实现货物流向信息统计工作。

    开关量采集电路和船舶数据采集系统

    公开(公告)号:CN108333991A

    公开(公告)日:2018-07-27

    申请号:CN201810182758.X

    申请日:2018-03-06

    发明人: 朱光辉 赵衍维

    IPC分类号: G05B19/042 G01D21/02

    摘要: 本申请公开了一种开关量采集电路和船舶数据采集系统,该开关量采集电路,包括依次设置于开关量输入端和机械开关之间的RC延时电路和反相器电路,所述RC延时电路包括第一电阻和电容,所述第一电阻串联在开关量输入端和反相器电路之间,所述电容的一端连接于所述第一电阻和反相器电路之间,电容的另一端接地,所述开关量采集电路包括第二电阻,该第二电阻的一端连接于所述第一电阻和反相器电路之间,第二电阻的另一端连接于一定值电压。本发明通过RC延时电路的延迟作用,可以控制对振荡脉冲的响应,使得反相器输入端的电位不会随着开关触点的抖动而急剧变化,可以消除抖动干扰。

    一种多数字分身管理方法和系统

    公开(公告)号:CN118338029B

    公开(公告)日:2024-09-10

    申请号:CN202410750051.X

    申请日:2024-06-12

    发明人: 朱光辉 赵衍维

    摘要: 本发明公开了一种多数字分身管理方法和系统,其中该方法包括:录制数字分身,针对多个不同直播内容设置对应的多个不同的第一直播脚本和第一交互接口;接收一个以上观众对于所要观看的直播内容的选择,向所述一个以上观众呈现直播内容对应的一个以上数字分身的直播行为;接收用户实时交互行为,基于所述第一交互接口识别所述实时交互行为并进行响应;若所述实时交互行为对应的交互数据未被所述第一交互接口所识别,则向主播推送所述实时交互行为对应的交互数据,主播设置用于响应所述实时交互行为的响应数据;基于响应数据更新所述第一交互接口,重新执行识别和响应步骤。如此,保证对于直播解说的观众体验的前提下有效提高与用户的交互效率。

    一种基于动作捕捉技术的数字人驱动方法及系统

    公开(公告)号:CN118135070A

    公开(公告)日:2024-06-04

    申请号:CN202410572208.4

    申请日:2024-05-10

    发明人: 朱光辉 赵衍维

    摘要: 本申请涉及图像数据处理技术领域,具体涉及一种基于动作捕捉技术的数字人驱动方法及系统,该方法包括:获取连续采集数字人体图像,得到每帧人体节点模型图像的关节点和肢体连线;基于肢体连线长度差异确定人体肢体连线垂直旋转强度;基于每帧图像中各节点的位置坐标,构建人体关节相对运动向量和绝对运动向量,计算帧间相对运动变异度、帧间绝对运动变异度和帧内绝对运动变异度,确定关节点姿态运动后验权重和人体整体运动后验权重,计算人体模型关节点修正位置卡尔曼增益,确定人体模型关节点修正位置,完成对数字人三维模型的驱动。从而在人体肢体遮挡的情况下获得正确的人体节点模型图,提高数字人驱动效果。

    业务流数据同步处理方法和系统、电子设备和存储介质

    公开(公告)号:CN116319836A

    公开(公告)日:2023-06-23

    申请号:CN202310576865.1

    申请日:2023-05-22

    发明人: 赵衍维

    摘要: 本发明公开了一种业务流数据同步处理方法和系统、电子设备和存储介质,该方法包括在固定水域内设置数据同步节点,固定水域内的第一水面对象上传业务流数据至数据同步节点,所述业务流数据包括第一AIS系统数据及临接船舶数据,数据同步节点基于船舶标志信息在船舶状态列表中进行匹配,基于匹配结果更新船舶数据项;响应于接收到周期同步信号,多个数据同步节点向调度控制中心上传同步数据,完成船舶业务流数据同步。通过采用新的船联网数据实时填补AIS系统数据缺项,稳定地实现船舶业务流数据同步。