一种听视觉协同的人形机器人头部定向方法

    公开(公告)号:CN113910217B

    公开(公告)日:2023-12-01

    申请号:CN202010993992.8

    申请日:2020-09-21

    申请人: 复旦大学

    发明人: 王守岩 李岩

    IPC分类号: B25J9/16

    摘要: 本发明提供了一种听视觉协同的人形机器人头部定向方法,其特征在于,主要包括如下步骤:首先通过麦克风阵列采集语音信号并记录时间;然后利用人声识别方法识别,统计采集到人声的麦克风数量;接着在人声麦克风数量大于1时根据时间设定候选目标方位;然后转动摄像头并采集视频;又从视频中获取人脸图像帧,利用人脸辨识方法辨识得到人脸辨识结果,并统计人脸数量;继而在人脸数量大于1时计算人脸面积并排序;接下来根据排名设定候选目标人脸;然后利用唇动检测算法实现唇动识别;接着在出现唇动的人脸数量大于1时根据面积设定目标方位;最后转动人形机器人头部实现定向。本发明能让人形机器人区分人声与其他声音并能准确地与目标人声进行交互。

    基于多信号的闭环深部脑刺激装置、系统及设备

    公开(公告)号:CN113577559B

    公开(公告)日:2022-07-26

    申请号:CN202111030407.5

    申请日:2021-09-03

    申请人: 复旦大学

    发明人: 刘伟 王守岩 李岩

    摘要: 本发明公开一种基于多信号的闭环深部脑刺激装置、系统及设备,其中装置实现的方法包括:基于实时获取的任一目标对象的多个生理信号数据分别计算相应的刺激参数;多个生理信号数据包括体表生理信号数据和/或肢体运动信号数据、颅内局部场电位信号数据;对获取的目标对象在当前时间窗口内与多个生理信号数据对应的刺激参数进行数据融合并获得相应的目标融合数据;判断目标融合数据是否大于当前时间窗口相应的目标参考阈值;若是,则通过植入式深部脑刺激电极对目标对象施加预设刺激参数的电刺激;该装置在实现闭环控制过程在满足实时性的前提下,进行脑刺激的数据依据种类更全面,策略性更强,闭环刺激控制精度更高。

    一种听视觉协同的人形机器人头部定向方法

    公开(公告)号:CN113910217A

    公开(公告)日:2022-01-11

    申请号:CN202010993992.8

    申请日:2020-09-21

    申请人: 复旦大学

    发明人: 王守岩 李岩

    IPC分类号: B25J9/16

    摘要: 本发明提供了一种听视觉协同的人形机器人头部定向方法,其特征在于,主要包括如下步骤:首先通过麦克风阵列采集语音信号并记录时间;然后利用人声识别方法识别,统计采集到人声的麦克风数量;接着在人声麦克风数量大于1时根据时间设定候选目标方位;然后转动摄像头并采集视频;又从视频中获取人脸图像帧,利用人脸辨识方法辨识得到人脸辨识结果,并统计人脸数量;继而在人脸数量大于1时计算人脸面积并排序;接下来根据排名设定候选目标人脸;然后利用唇动检测算法实现唇动识别;接着在出现唇动的人脸数量大于1时根据面积设定目标方位;最后转动人形机器人头部实现定向。本发明能让人形机器人区分人声与其他声音并能准确地与目标人声进行交互。

    基于多信号的闭环深部脑刺激方法、装置、系统及设备

    公开(公告)号:CN113577559A

    公开(公告)日:2021-11-02

    申请号:CN202111030407.5

    申请日:2021-09-03

    申请人: 复旦大学

    发明人: 刘伟 王守岩 李岩

    摘要: 本发明公开一种基于多信号的闭环深部脑刺激方法、装置、系统及设备,其中方法包括:基于实时获取的任一目标对象的多个生理信号数据分别计算相应的刺激参数;多个生理信号数据包括体表生理信号数据和/或肢体运动信号数据、颅内局部场电位信号数据;对获取的目标对象在当前时间窗口内与多个生理信号数据对应的刺激参数进行数据融合并获得相应的目标融合数据;判断目标融合数据是否大于当前时间窗口相应的目标参考阈值;若是,则通过植入式深部脑刺激电极对目标对象施加预设刺激参数的电刺激;该方法在实现闭环控制过程在满足实时性的前提下,进行脑刺激的数据依据种类更全面,策略性更强,闭环刺激控制精度更高。

    一种基于稳态视觉诱发电位的沟通系统

    公开(公告)号:CN113568503B

    公开(公告)日:2024-02-13

    申请号:CN202110825498.5

    申请日:2021-07-21

    申请人: 复旦大学

    IPC分类号: G06F3/01

    摘要: 本发明提供一种基于稳态视觉诱发电位的沟通系统,通过光源盒对用户产生视觉刺激,通过脑电采集模块采集人脑受视觉刺激后产生的视觉诱发电位信号,并对其进行处理,得到对应的脑电信号频率成分,基于该脑电信号频率成分,信息交互模块找到用户注视的光源子盒,得到对应的沟通信息,并同样通过光源盒来向陪护人员显示该沟通信息。该沟通系统提供了多个可自定义的光源子盒,用户可以按照自己的需求,将其自定义成多个常用的生活意图,因此,通过该沟通系统,用户可以仅使用脑电信号快速高效且准确地向陪护人员表达其常用的生活意图,从而能更快能到相应的帮助,提高用户的生活质量。

    一种基于稳态视觉诱发电位的沟通系统

    公开(公告)号:CN113568503A

    公开(公告)日:2021-10-29

    申请号:CN202110825498.5

    申请日:2021-07-21

    申请人: 复旦大学

    IPC分类号: G06F3/01

    摘要: 本发明提供一种基于稳态视觉诱发电位的沟通系统,通过光源盒对用户产生视觉刺激,通过脑电采集模块采集人脑受视觉刺激后产生的视觉诱发电位信号,并对其进行处理,得到对应的脑电信号频率成分,基于该脑电信号频率成分,信息交互模块找到用户注视的光源子盒,得到对应的沟通信息,并同样通过光源盒来向陪护人员显示该沟通信息。该沟通系统提供了多个可自定义的光源子盒,用户可以按照自己的需求,将其自定义成多个常用的生活意图,因此,通过该沟通系统,用户可以仅使用脑电信号快速高效且准确地向陪护人员表达其常用的生活意图,从而能更快能到相应的帮助,提高用户的生活质量。

    应用于焦磷酸测序的化学修饰引物介导的方向特异性单链DNA制备

    公开(公告)号:CN104342494B

    公开(公告)日:2017-11-24

    申请号:CN201410607086.4

    申请日:2014-10-31

    申请人: 复旦大学

    IPC分类号: C12Q1/68 C12N15/10

    摘要: 本发明涉及应用于焦磷酸测序的化学修饰引物介导的方向特异性单链DNA制备。具体地说在PCR时一条引物用普通合成的引物,而另一条引物用可以抗酶切的化学修饰引物,PCR扩增后再利用有5’→3’切割功能的外切酶处理双链DNA,将未修饰的DNA单链消化掉,制备方向特异的单链模板DNA。应用这种方法制备单链DNA可以直接用于作为焦磷酸测序的模板,大大降低了焦磷酸测序的成本,减少了测序模板制备的繁琐步骤。

    一种基于多目视觉定位的增强现实交互系统及其操作方法

    公开(公告)号:CN111047713B

    公开(公告)日:2023-05-30

    申请号:CN201911391144.3

    申请日:2019-12-30

    申请人: 复旦大学

    IPC分类号: G06T19/00 G06F3/01 G16H50/50

    摘要: 本发明属于人机交互交互领域,具体为一种基于多目视觉定位的增强现实交互系统及其操作方法。本发明的增强现实交互系统,包括操作平台和三维眼镜,操作平台包括承载平台、相机、嵌入式图像处理系统等;嵌入式图像处理系统包括中央处理器、图形处理器,用于控制系统的运行并对采集到的图像进行实时处理;三维眼镜包括显示屏、摄像头等;摄像头用于采集使用者前方真实场景的图像。操作平台用来对现实物体提供承载和形态位置的识别,三维眼镜用来将虚拟物体与现实环境进行融合显示。通过对多个摄像头采集的图像进行融合可以实现对物体的形态和位置的精确识别,再通过嵌入式图形处理系统将真实物体与虚拟环境进行融合,产生立体视觉实现精细的增强现实交互。