-
公开(公告)号:CN118486332A
公开(公告)日:2024-08-13
申请号:CN202410085402.X
申请日:2024-01-19
Applicant: 南京邮电大学
Abstract: 本发明提出了一种基于音频信号的轻量化多特征提取情感识别系统及方法,该系统包括:预处理模块,用于对原始的音频信号进行预处理,输出原始信号的频域信息;梅尔滤波器组处理模块,用于将原始信号的频域信息转换为梅尔时频谱图;多特征提取模块,用于提取梅尔时频谱图中的特征;金字塔Transformer,用于接收多特征提取模块输出的多特征并输出高维编码特征;及全连接层,用于对金字塔Transformer输出的高维编码特征进行最终分类。本发明可充分提取信号频谱图的特征信息,从而提升信号分类识别精度。
-
公开(公告)号:CN117689888A
公开(公告)日:2024-03-12
申请号:CN202311727812.1
申请日:2023-12-15
Applicant: 南京邮电大学
IPC: G06V10/26 , G06V20/70 , G06V20/10 , G06V20/13 , G06V10/82 , G06V10/80 , G06V10/44 , G06V10/42 , G06N3/0464 , G06N3/045 , G06N3/084 , G06N3/048
Abstract: 本发明提出了一种基于空间域与频率域U型网络模型的遥感图像道路分割法,该方法包括:准备公开的遥感图像数据集,将含有道路的遥感图像通过手工标注划分出背景和道路;将训练集和验证集通过旋转、缩放、翻转和镜像的操作进行数据增强;将数据增强的训练集和验证集输入本发明提出的网络模型进行训练;将训练出来的模型作为预测模型,将测试集输入所述的预测模型进行道路的分割,即可分割结果。本发明通过将空间域卷积和频率域卷积结合起来,形成一个混合的全局‑局部特征表示方案,解决了遥感图像中长而细小的道路对象难以捕捉的问题。
-
公开(公告)号:CN112801895B
公开(公告)日:2022-10-14
申请号:CN202110053892.1
申请日:2021-01-15
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于二阶段注意力机制GAN网络图像修复算法,包括以下步骤:搭建基于GPU版本的Pytorch深度学习框架运行环境;准备数据集,每个数据集都有真实的图片和mask;搭建运行图像到图像的深度神经网络,包括生成器和判别器;进行泛化实验。生成器采用编码器-解码器结构,不断训练以生成预测图像;判别器衡量生成图像的真实性,以对抗损失作为损失函数。通过不断迭代联合优化生成器和判别器,以使网络预测性能提高。本发明能够训练实现端到端的自监督图像转换,既能用于学习输入图像到输出图像之间的映射关系,又能学习用于训练映射关系的损失函数。
-
公开(公告)号:CN114299362A
公开(公告)日:2022-04-08
申请号:CN202111616910.9
申请日:2021-12-27
Applicant: 南京邮电大学
IPC: G06V10/774 , G06V10/82 , G06K9/62 , G06N3/04 , G06N3/08
Abstract: 本发明公开了一种基于k‑means聚类的小样本图像分类方法,首选,一个包含支持集和查询集的任务被送到特征提取器中,经过连续的卷积块操作后,获得深度图像特征。接着,一个小样本分类模块利用查询集和支持集的深度图像特征,通过构建相似矩阵,可以预测查询集中的图片所属的支持类别。与此同时,一个k‑means聚类任务对特征提取器所输出的图像特征进行聚类,形成若干个簇,同时为每一个簇内的样本分配伪标签。簇分类模块根据伪标签将特征提取器输出的图像特征分成k个类别。在训练过程中,多个任务共享信息,相互促进学习。与现有的小样本图像分类模型相比较,本发明在保持模型稳定性的同时显著提升了小样本图像分类的准确性。
-
公开(公告)号:CN108734722B
公开(公告)日:2022-03-15
申请号:CN201810346646.3
申请日:2018-04-18
Applicant: 南京邮电大学
Abstract: 本发明揭示了一种基于PSR的视觉跟踪错误修正方法,包括如下步骤:S1、计算出第一帧的相关滤波器;S2、限定实施错误修正的范围;S3、计算出与;S4、将与进行比较;S5、提取目标在新状态下的特征;S6、重复上述步骤,完成后续检测修正。当出现物体遮挡、视角变化、目标形变、周围光照变化等情况时,本发明的方法可以通过使用第一帧训练得到的相关滤波器来对后续跟踪检测过程中的状态估计进行判定,若第一帧有比当前帧正在使用的滤波器更高的可信度,则使用第一帧来进行状态估计,从而减少了视觉跟踪过程中错误发生的几率,提高了视觉跟踪的精度。
-
公开(公告)号:CN111222463A
公开(公告)日:2020-06-02
申请号:CN202010013452.9
申请日:2020-01-07
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于级联式卷积网络的机动车人脸检测方法,所述方法包括:获取机动车的拍摄图片;将所述拍摄图片输入至人脸检测方法模型得到拍摄图片中人脸图像的位置;所述人脸检测方法模型采用级联式卷积神经网络。本发明针对机动车人脸检测设计了级联式卷积神经网络并充分考虑了在机动车人脸检测领域中公开数据缺乏的问题,通过预训练、再训练的方式提高网络对机动车人脸图片的鲁棒性,在新的DRIVER FACE数据集上取得了不错的人脸检测效果。
-
公开(公告)号:CN108665482A
公开(公告)日:2018-10-16
申请号:CN201810346647.8
申请日:2018-04-18
Applicant: 南京邮电大学
Abstract: 本发明揭示了一种基于VGG深度网络的视觉目标跟踪方法,包括如下步骤:S1、编译MatConvNet的运行环境;S2、构建VGG深度神经网络;S3、进行视频帧输入,并判断输入帧是否为初始帧,若输入帧为非初始帧,则进入S4,若输入帧为初始帧,则跳过S4、进入S5;S4、进行目标新状态估计,随后进入S5;S5、进行滤波器模型的在线更新。本发明与传统的视觉目标跟踪方法相比,在特征上包含了更多的语义信息,可以有更高的跟踪精度。而与利用高层深度特征的视觉目标跟踪方法相比,本发明所使用的低层数据既可以节约计算损耗,而又不缺失语义信息。因此,本发明在跟踪精度和跟踪速度上做了权衡,获得了优异的跟踪性能。
-
公开(公告)号:CN114579783B
公开(公告)日:2024-12-24
申请号:CN202210232828.4
申请日:2022-03-09
Applicant: 南京邮电大学
Abstract: 本发明是一种基于最近邻与困难样本挖掘的无监督图像嵌入学习方法,包括步骤1:搭建深度学习框架运行环境;步骤2:搭建执行无监督嵌入学习任务的网络模型;步骤3:使用数据集通过端到端的方式对网络进行训练;步骤4:将步骤3完成训练后的图像输入到无监督嵌入学习任务的网络模型中,根据图像特征之间的余弦相似性检索出相似度最近的图像,如检索到的图像属于同一类别,则检索成功。该方法利用深度神经网络对图像提取特征,然后根据特征之间的余弦相似性,挖掘样本的最近邻域,从而将图像分为若干个邻域,邻域内的样本图像共享伪类别信息,使得模型能够学习到图像的高判别性特征。
-
公开(公告)号:CN117648626A
公开(公告)日:2024-03-05
申请号:CN202311640929.6
申请日:2023-12-01
Applicant: 南京邮电大学
IPC: G06F18/241 , G06F18/10 , G06F18/213 , G06N3/0464 , G06N3/048 , G06N3/047 , G06N3/08 , G06N3/09
Abstract: 本发明提出了一种基于时频转换和复值多头注意力掩码机制的射频指纹识别法,该方法包括:步骤1、利用傅里叶变换将原始卫星I/Q信号的I路与Q路变换至频域,并使用复值卷积对原始卫星I/Q信号进行初步的维度扩展与缩减,方便后续编码器结构的运算;步骤2、将I/Q信号两路的频域特征图分别输入进复值多头注意力模块,在复数注意力的多头中使用三种不同的掩码策略,丰富注意力的表达和计算效率;步骤3、利用傅里叶逆变换将两路注意力结果特征图分别逆变换至时域,输入分类层进行映射,实现最终分类。本发明能够高效提取出卫星I/Q复数信号中所蕴含的唯一映射硬件发射源身份的射频指纹,实现卫星发射源的高精度分类识别。
-
公开(公告)号:CN112819762A
公开(公告)日:2021-05-18
申请号:CN202110087473.X
申请日:2021-01-22
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于伪孪生密集连接注意力机制的路面裂缝检测方法,包括:步骤S1、获取数据集;步骤S2、对所述训练集中的图片进行预处理;步骤S3、构建伪孪生残差网络;步骤S4、设计伪孪生残差网络的损失函数,训练所述伪孪生残差网络直到所述损失函数收敛,保存模型;步骤S5、使用所述步骤S4中得到的模型检测所述测试中图片的裂缝。本发明通过改进传统的Encoder‑Decoder模型,使得可以有效的检测混合背景下即混合数据集下的检测结果;并且对损失函数进行优化,使其更适用于路面裂缝背景。
-
-
-
-
-
-
-
-
-