基于数据增强和伪标签的域自适应行为识别系统及方法

    公开(公告)号:CN114638995B

    公开(公告)日:2025-01-07

    申请号:CN202210276936.1

    申请日:2022-03-21

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于数据增强和伪标签的域自适应行为识别系统及方法,包括:数据采集模块,采集用户运动时的传感器原始数据;数据预处理模块,对公开数据集中的源域传感器数据和采集到的目标域传感器数据进行归一化和数据分割,得到源域和目标域样本数据;行为识别模块,选择源域样本数据训练得到域泛化基础模型,对目标域样本数据进行数据增强得到增强后的目标域样本数据,使用迭代计算伪标签算法和增强后的目标域样本数据优化域泛化基础模型,迭代终止时目标域样本数据的分类结果即为行为识别结果。本发明利用未标记的目标域样本数据优化分类模型,降低对目标域带标记样本的依赖性,在降低标记成本的同时提高了行为识别的准确度和鲁棒性。

    基于超声波感知与知识蒸馏的唇语识别系统及方法

    公开(公告)号:CN113011245B

    公开(公告)日:2023-12-12

    申请号:CN202110116571.1

    申请日:2021-01-28

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于超声波感知与知识蒸馏的唇语识别系统及方法,包括:数据收集单元,数据预处理单元,模型训练单元;数据收集单元包括:超声波数据收集模块,视觉数据收集模块;数据预处理单元包括:超声波预处理模块,视觉预处理模块;模型训练单元包括:超声波唇语识别模块,视觉唇语识别模块,知识蒸馏模块;本发明通过使用知识蒸馏的方法,弥补了仅使用超声波信息进行唇语识别的局限性,增强了超声波唇语识别的能力。

    基于数据增强和伪标签的域自适应行为识别系统及方法

    公开(公告)号:CN114638995A

    公开(公告)日:2022-06-17

    申请号:CN202210276936.1

    申请日:2022-03-21

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于数据增强和伪标签的域自适应行为识别系统及方法,包括:数据采集模块,采集用户运动时的传感器原始数据;数据预处理模块,对公开数据集中的源域传感器数据和采集到的目标域传感器数据进行归一化和数据分割,得到源域和目标域样本数据;行为识别模块,选择源域样本数据训练得到域泛化基础模型,对目标域样本数据进行数据增强得到增强后的目标域样本数据,使用迭代计算伪标签算法和增强后的目标域样本数据优化域泛化基础模型,迭代终止时目标域样本数据的分类结果即为行为识别结果。本发明利用未标记的目标域样本数据优化分类模型,降低对目标域带标记样本的依赖性,在降低标记成本的同时提高了行为识别的准确度和鲁棒性。

    一种基于惯性传感器的刚体运动追踪系统及其工作方法

    公开(公告)号:CN108627153B

    公开(公告)日:2022-06-07

    申请号:CN201810448583.2

    申请日:2018-05-11

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于惯性传感器的刚体运动追踪系统及其工作方法,该系统包括可附着在刚体上的惯性传感器节点和数据采集处理终端。惯性传感器节点包含惯性传感器、计算模块和无线通信模块。数据采集处理终端包含无线通信模块和计算机系统。用户将惯性传感器节点布置在刚体上,节点实时采集传感器数据并无线传输至数据采集处理终端。当运动结束,计算机系统执行运动追踪和运动分析算法,对数据做预处理,获知惯性传感器节点的加速度,并计算其速度和运动轨迹,再基于惯性传感器节点的姿态以及刚体上其他点和传感器节点的相对位置关系对这些点的运动轨迹进行还原,最终可以呈现刚体选定点的运动轨迹并对运动过程中发生的平移和旋转进行分析。

    一种目标键盘追踪系统及方法

    公开(公告)号:CN110413111B

    公开(公告)日:2021-06-01

    申请号:CN201910615492.8

    申请日:2019-07-09

    Applicant: 南京大学

    Abstract: 本发明公开了一种目标键盘追踪系统及方法,应用于运动的智能眼镜与纸质键盘输入交互场景中;该系统包括:键盘追踪模块及自适应追踪模块;键盘追踪模块包括键盘的提取、特征点对选取、计算变换矩阵和键盘坐标转换;自适应追踪模块包括传感器数据获取、数据分段分析、判断状态并发送是否继续追踪的信号。本发明采用多线程优化技术来降低追踪处理的时延;实现了实时的键盘追踪,并且很好地满足用户的键盘交互输入需求。

    一种基于惯性感知的视频防抖系统及其工作方法

    公开(公告)号:CN110139031A

    公开(公告)日:2019-08-16

    申请号:CN201910367117.6

    申请日:2019-05-05

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于惯性感知的视频防抖系统及其工作方法。该方法首先使用惯性传感器来追踪相机的旋转,然后通过追踪视频帧中特征点的坐标变化,进一步地估计相机的平移。通过惯性-视觉融合,该方法能够准确、鲁棒地估计相机的运动,并降低计算开销。然后基于Android智能设备,本发明设计并实现了一个实时的视频防抖系统。在系统实现过程中,本发明采用多线程优化技术来降低视频防抖的处理时间。最终在Android移动设备上,实现了实时的视频防抖系统,并且很好地满足用户对视频防抖的需求。

    一种基于配准融合与接缝线辅助的图像拼接系统及方法

    公开(公告)号:CN115546084A

    公开(公告)日:2022-12-30

    申请号:CN202211251737.1

    申请日:2022-10-13

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于配准融合与接缝线辅助的图像拼接系统及方法,包括:图像重叠区域配准模块、图像非重叠区域配准模块及配准融合模块;图像重叠区域配准模块,包括:特征点配对模块、初步配准模块、线段配对模块、精确配准模块及接缝线计算模块;图像非重叠区域配准模块,包括:线段斜率计算模块和畸变矫正模块;本发明能够同时处理存在较大视差和较大拍摄角度差的图像拼接问题,基于配准融合和接缝线算法,消除视差带来的图像配准误差以及重影,避免拍摄角度差导致的畸变问题。

    基于数据增强与知识蒸馏的可增类行为识别系统及方法

    公开(公告)号:CN114638289A

    公开(公告)日:2022-06-17

    申请号:CN202210216245.2

    申请日:2022-03-07

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于数据增强与知识蒸馏的可增类行为识别系统及方法,包括:数据采集单元,用于采集用户运动时的传感器数据;数据预处理单元,输出经过预处理后的行为数据;存储单元,用于存储旧行为类别代表样本集和旧行为识别模型;行为识别单元,用于对预处理后的行为数据进行识别和分类;增类训练单元,输出一个新行为识别模型;所述新行为识别模型对旧行为类别数据或新行为类别数据进行识别,输出行为识别结果。本发明在行为识别的持续学习过程中,保证了持续学习性能和资源成本优势;同时符合现实生活中用户行为的动态扩张性,对未知的新类别行为能够保持可持续性的增类识别性能。

    一种算术作业批改系统及方法

    公开(公告)号:CN111986117A

    公开(公告)日:2020-11-24

    申请号:CN202010895936.0

    申请日:2020-08-31

    Applicant: 南京大学

    Abstract: 本发明公开了一种算术作业批改系统及方法,该系统包括:图像预处理和分割模块,字符识别模块以及计算验证模块;图像预处理和分割模块会对原始图片进行去噪、二值化等预处理然后将其分割为单个数字或符号;字符识别模块使用卷积神经网络对分割的单个字符进行识别;计算验证模块将识别出来的字符重组为算术并计算验证答案的正确性。本发明通过常见的智能手机等智能电子设备实现作业拍照识别,并能在本地运行完成算术作业的自动批改,适用于小学低年级数学计算作业的批改,帮助老师提高教学效率。

    一种基于非精确锚节点的RFID定位系统及定位方法

    公开(公告)号:CN104217231A

    公开(公告)日:2014-12-17

    申请号:CN201410439297.1

    申请日:2014-08-29

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于非精确锚节点的RFID定位系统及定位方法,系统主要包括货架、货品、RFID标签、读写器、天线等。在待定位环境中,部署坐标位置已知的货架,货架上摆放附有RFID标签的货品,货品的精确位置未知,只能获取其分类在货架上的起止位置。本发明通过使用这些没有精确位置信息的货品标签为锚节点,基于货品种类的分布情况,搭建了一种RFID定位系统,并提出行之有效的定位方法。该系统不需要获得货品的精确位置信息,只需要通过扫描到的货品分类信息即可完成定位操作。

Patent Agency Ranking