-
公开(公告)号:CN119871409A
公开(公告)日:2025-04-25
申请号:CN202510115199.0
申请日:2025-01-24
Applicant: 东南大学
IPC: B25J9/16
Abstract: 本发明公开了眼动特征驱动的协作机械臂遥操作控制系统与方法。所述方法包括:眼动仪和全局摄像头校准;构建及训练动作意图识别模型;所述动作意图识别模型以眼动特征作为数据输入,以动作意图作为数据输出,建立数据输入和输出的关系模型;根据眼动特征进行动作意图在线识别和预测,提取动作意图识别;根据动作意图识别命令机械臂执行动作。该方法使得操作者能够以自然和直观的方式操控机械臂,不需要频繁切换操控模式,也可以有效避免由于不自觉眼跳产生的机械夹爪的不可控运动现象。同时,该方法完善了对于机械夹爪在抓取放置时的细节姿态控制,这对于残疾人群体,特别是上肢功能障碍者,提高了操控的效率和便捷性,从而增强了其独立完成日常活动的能力。
-
公开(公告)号:CN114995635A
公开(公告)日:2022-09-02
申请号:CN202210485037.2
申请日:2022-05-06
Applicant: 东南大学
IPC: G06F3/01 , G06F3/0485 , G06F3/04883
Abstract: 本发明公开了一种基于混合现实桌面手势交互方法,涉及混合现实技术领域,解决了裸手交互易疲劳且效率不高的技术问题,其技术方案要点是利用计算机视觉技术实时监测用户桌面手指动作,允许用户通过桌面小范围手指动作与混合现实交互系统产生交互行为,大幅降低交互疲劳,提升交互速度,并且不干涉其他手势交互技术,具有较强的技术兼容性,满足需要频繁交互、长期交互的混合现实场景需求。
-
公开(公告)号:CN114995634A
公开(公告)日:2022-09-02
申请号:CN202210485007.1
申请日:2022-05-06
Applicant: 东南大学
Abstract: 本发明公开了一种基于虚拟现实桌面手势交互系统,涉及虚拟现实技术领域,解决了用户在与虚拟环境交互过程中的交互动作幅度较大且交互效率不高的技术问题,其技术方案要点是缩小用户在与虚拟环境交互过程中的交互动作幅度,贴合人体生物力学性能,降低交互疲劳,提高交互效率;简化硬件结构,缩小硬件体积,确保硬件系统可随身携带;桌面手势交互作为独立的交互系统并不干涉其他手势交互方式(例如空中手势交互、虚拟手接触点击交互等),具有良好的技术兼容性。同时,基于计算机视觉技术的桌面手势识别算法通过对桌面图像干扰针对性分类处理,大幅提升手势识别准确率。
-
公开(公告)号:CN108491068A
公开(公告)日:2018-09-04
申请号:CN201810127171.9
申请日:2018-02-08
Applicant: 东南大学
IPC: G06F3/01 , G06F3/0481 , G06F3/0487
CPC classification number: G06F3/013 , G06F3/04817 , G06F3/0487
Abstract: 本发明公开了一种眼动信号控制的交互方法,该方法包括以下步骤:(1)对获取的功能图标进行预处理;(2)对眼动信号进行数字编码;(3)存储功能图标的眼动信号数组;(4)采集、输出、计算和识别所述眼动信号;(5)被试者确认眼动指令;所述图标预处理包括对所述功能图标进行数字编码,每个功能图标对应一个唯一的数字编号i,所述数字编号i的位数w为[1,4]区间上的整数,当w≥2时,数字编号的相邻数字间不重复,按照所述功能图标的使用频率m对所述功能图标进行数字编码。本发明直接采集人对不同图标图片的眼动信号,依据眼动信号的不同实现了图标对数字界面的眼机交互,提高了数字界面的交互效率。
-
公开(公告)号:CN103713728B
公开(公告)日:2016-09-21
申请号:CN201410016744.2
申请日:2014-01-14
Applicant: 东南大学
Abstract: 本发明公开一种基于眼动信号的复杂系统人机界面可用性的检测方法。其中检测方法包括如下步骤:通过生态界面方法提取复杂系统人机界面的任务信息;将提取信息按照不同的任务设计编入心理学实验软件,通过眼动仪采集操作员的眼动信息;根据眼动信息计算处理处理检测指标并完成可用性子特征质量检测;融合可用性子特征,检测人机界面可用性的优劣。其中检测系统包括:人机界面任务信息提取模块、用户的眼动信号采集模块、眼动信号处理模块、可用性子特征检测模块和可用性检测模块。本发明通过眼动追踪技术,对复杂系统人机界面可用性优劣进行检测并判断其是否符合人的使用需求,具有较好的实时性与较高的可信度。
-
公开(公告)号:CN103713728A
公开(公告)日:2014-04-09
申请号:CN201410016744.2
申请日:2014-01-14
Applicant: 东南大学
Abstract: 本发明公开一种基于眼动信号的复杂系统人机界面可用性的检测方法。其中检测方法包括如下步骤:通过生态界面方法提取复杂系统人机界面的任务信息;将提取信息按照不同的任务设计编入心理学实验软件,通过眼动仪采集操作员的眼动信息;根据眼动信息计算处理处理检测指标并完成可用性子特征质量检测;融合可用性子特征,检测人机界面可用性的优劣。其中检测系统包括:人机界面任务信息提取模块、用户的眼动信号采集模块、眼动信号处理模块、可用性子特征检测模块和可用性检测模块。本发明通过眼动追踪技术,对复杂系统人机界面可用性优劣进行检测并判断其是否符合人的使用需求,具有较好的实时性与较高的可信度。
-
公开(公告)号:CN114630069B
公开(公告)日:2024-10-29
申请号:CN202210159948.6
申请日:2022-02-22
Applicant: 东南大学
Abstract: 本发明公开了一种音视频优化方法、音频终端及存储介质,音视频优化方法包括:获取当前发言者的音视频数据;根据获取的当前发言者的音视频数据,提取音视频数据中音频数据的语音音节;基于提取的音视频数据中音频数据的语音音节,计算得到当前发言者的夹带振荡周期;基于计算得到的当前发言者的夹带振荡周期,对当前发言者的音视频数据进行时间流重定向,获得目标播放的音视频数据。本发明提供的音视频优化方法,首先采集每一个发言者的音频数据计算其语音音节规律,也称夹带振荡周期,然后基于所述夹带振荡周期在接收方客户端对经过传输后的音视频数据进行重定向,进而解决了可变网络延迟导致的线上会议用户产生的“变焦疲劳”。
-
公开(公告)号:CN112181133B
公开(公告)日:2024-05-07
申请号:CN202010857334.6
申请日:2020-08-24
Applicant: 东南大学
IPC: G06F3/01 , G06F3/04883
Abstract: 本发明公开了一种基于静态和动态手势交互任务的模型评估方法及系统,涉及交互任务模型评估技术领域,解决了现有静态和动态手势交互任务不能进行量化评估的技术问题,其技术方案要点是对用户交互任务进行分析得到用户交互行为,对用户交互行为进行研究确定用户基本动素。为用户基本动素配置交互规则,同时分析测算用户基本动素的交互时间以及系统动作时间,根据交互时间、交互规则和系统动作时间预估完成用户交互任务的总时间,最后根据总时间对交互任务进行评估。使得基于静态和动态手势的交互任务实现了量化评估,从而帮助相关从业人员更科学地设计交互模型,为在自然人机交互系统下进行静态和动态手势交互任务的人员提供更流畅舒适的交互体验。
-
公开(公告)号:CN112181133A
公开(公告)日:2021-01-05
申请号:CN202010857334.6
申请日:2020-08-24
Applicant: 东南大学
IPC: G06F3/01 , G06F3/0488
Abstract: 本发明公开了一种基于静态和动态手势交互任务的模型评估方法及系统,涉及交互任务模型评估技术领域,解决了现有静态和动态手势交互任务不能进行量化评估的技术问题,其技术方案要点是对用户交互任务进行分析得到用户交互行为,对用户交互行为进行研究确定用户基本动素。为用户基本动素配置交互规则,同时分析测算用户基本动素的交互时间以及系统动作时间,根据交互时间、交互规则和系统动作时间预估完成用户交互任务的总时间,最后根据总时间对交互任务进行评估。使得基于静态和动态手势的交互任务实现了量化评估,从而帮助相关从业人员更科学地设计交互模型,为在自然人机交互系统下进行静态和动态手势交互任务的人员提供更流畅舒适的交互体验。
-
公开(公告)号:CN109683205B
公开(公告)日:2020-09-11
申请号:CN201811623440.7
申请日:2018-12-28
Applicant: 东南大学
Abstract: 本发明公开了一种空中探测装置以及地面弹射系统,包括上半球壳和下半球壳组成的球壳,所述球壳上开设多个探测器收纳孔以及在上半球壳的顶部沿圆周开设降落伞收纳槽,所述球壳内布置红外探测系统、运动传感系统、主控系统以及供电系统,所述红外探测系统、运动传感系统和供电系统均与所述主控系统相连,所述红外探测系统包括多个红外探测器,所述红外探测器通过所述探测器收纳孔固定在所述球壳上。本发明通过弹射装置将探测装置升空,并在空中使用多组红外探测装置进行联合探测,该方法巧妙地规避了地面探测时的障碍物屏障的缺点,且升空速度快,噪声较小,体量较小可随身携带,适用于突发事件或紧急状况,尤其在野生动物保护与监测、洪水抢险救灾、地震救灾、单兵作战、刑侦等领域有较好应用价值。
-
-
-
-
-
-
-
-
-