公开(公告)号：CN116912858A

公开(公告)日：2023-10-20

申请号：CN202310948856.0

申请日：2023-07-31

Applicant: 安徽工业大学

Inventor： 屈喜文 ,  叶明红 ,  黄俊

IPC: G06V30/228 ,  G06V30/18 ,  G06V30/19 ,  G06V10/44 ,  G06V10/80 ,  G06V10/764 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/08 ,  G06V30/148 ,  G06V10/26

Abstract: 本发明涉及智能人机交互技术领域，具体涉及一种基于改进的yolov5网络与单目视觉的空中手写文本采集方法，方法包括：构建初始指尖数据集并进行预处理获取目标指尖数据集，基于高效金字塔分割注意力模块EPSA以及加权双向特征金字塔网络BiFPN对yolov5网络进行改进，获取改进的yolov5网络，将目标指尖数据集的训练集输入改进的yolov5网络获取指尖检测模型，基于单目摄像头获取空中手写文本的实时二维视频图像并输入指尖检测模型，基于坐标系虚拟滑动技术，形成空中手写文本，解决了现有技术中因3D传感器较大，价格昂贵，导致普适性不足、因对WIFI环境要求较为严格，导致局限性较大以及因指尖属于小目标，导致yolov5网络对指尖进行检测时存在检测准确率低、漏检率高的技术问题。