-
公开(公告)号：CN116167014A
公开(公告)日：2023-05-26
申请号：CN202310167361.4
申请日：2023-02-27
Applicant: 南京邮电大学
IPC: G06F18/25 , G06F18/241 , G06N3/0464 , G06N3/048 , G06N3/084 , G06V10/44 , G06V10/764 , G06V10/82 , G06V10/80 , G10L25/63 , G10L25/03 , G10L25/30
Abstract: 本发明公开了一种基于视觉和语音的多模态关联型情感识别方法及系统，在视觉数据部分，提取指定数量的图像帧并调节为统一分辨率，利用3D卷积神经网络提取时序特征，得到指定尺寸的特征图；利用带滑动窗口的自注意力神经网络提取空间特征，将输出的特征图利用全局平均池化处理为指定大小的一维向量，得到视觉深层情感特征。在语音数据部分，使用声学分析框架提取声学特征，利用自注意力网络提取语音深层情感特征。最后将视觉和语音深层情感特征进行特征级融合，再通过分类器得到情感类型。本发明能够有效的提取视频数据在时间和空间维度的情感信息，并将视觉信息与语音信息相融合，提高了情感分类的识别效率与准确率。
-
公开(公告)号：CN113222910B
公开(公告)日：2022-11-01
申请号：CN202110449357.8
申请日：2021-04-25
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于感知损失的X射线头影测量图像特征点提取方法，涉及X射线头影测量图像技术领域，包括以下步骤：预先获取X射线头影测量图像，并作为数据输入；对X射线头影测量图像计算偏移距离图；将获取的偏移距离图输入至生成对抗网络模型，训练该模型预测得到每个特征点的偏移距离图，基于预测的偏移距离图，得到每个特征点的坐标，并以此作为该待测试X射线头影测量图像的特征点坐标。本发明网络模型耗时较短，节省硬件成本，而且无需对原始X射线头影测量图像进行裁剪，保证了数据的完整性，提高了特征点定位的准确性。
-
公开(公告)号：CN115049709A
公开(公告)日：2022-09-13
申请号：CN202210578192.9
申请日：2022-05-26
Applicant: 南京邮电大学
Abstract: 本发明公开了一种面向脊柱微创手术导航的深度学习点云腰椎配准方法，包括：采集术前和术中的脊柱CT图像；将脊柱CT图像输入训练好的三维V型深度分割网络模型进行分割，获取术前和术中的腰椎CT图像；通过形态学方法消除腰椎CT图像中的孤立点；通过点云转换方法将消除孤立点后的术前和术中的腰椎CT图像转换为相应的腰椎三维点云集合；对术前和术中的腰椎三维点云集合进行最近邻点迭代，完成术前与术中的脊柱CT图像中的腰椎配准；本发明能够减少图像拍摄次数同时实现腰椎图像的快速配准。
-
公开(公告)号：CN111626330B
公开(公告)日：2022-07-26
申请号：CN202010324557.6
申请日：2020-04-23
Applicant: 南京邮电大学
IPC: G06V10/75 , G06V10/774 , G06V10/764 , G06V10/80 , G06V10/82 , G06K9/62 , G06N3/04 , G06N3/08
Abstract: 本发明公开了一种基于多尺度特征图重构和知识蒸馏的目标检测方法与系统，该方法首先利用骨干网络Darknet‑53提取特征，深层特征通过上采样和浅层特征张量拼接生成多尺度特征图；然后采用特征重标定策略来自动获取特征图中每个通道的权重，依照权重提升有用的特征并抑制无用特征，再用残差模块融合顶层特征的语义信息和底层特征的细节信息；再将骨干网络中批量归一化层的γ系数引入到剪枝目标函数中进行训练，根据修剪阈值将低于阈值的γ系数所在通道从模型中去除；最后将训练好的YOLOv3基准模型作为教师网络，剪枝后的模型作为学生网络进行知识蒸馏。本发明改善了在大范围内不同大小物体检测的精度问题，同时降低了模型的计算量，提高了模型检测速度。
-
公开(公告)号：CN109360232B
公开(公告)日：2021-04-06
申请号：CN201811049134.7
申请日：2018-09-10
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于条件生成对抗网络的室内场景布局估计方法和装置，该方法包括：运用训练集训练条件生成对抗网络，将待测室内图像输入至训练完成的条件生成对抗网络，预测生成与输入图像尺寸相同的布局边缘图；估计待测室内图像的消失点，从每个消失点等角度间隔引出射线，生成若干扇形区域；根据平均边缘强度最大准则确定采样扇形区域；对预测布局边缘图加高斯模糊，然后对采样扇形区域进行采样生成布局候选项；选出与预测布局边缘图最为相似的空间布局作为最终的布局估计结果。本发明为生成场景布局边界图提供更加完整的原始信息，无需显式假设数据的参数分布，能提高布局估计的准确率，在室内场景理解和三维重建任务中具有重要的应用价值。
-
Patent Agency Ranking
公开(公告)号：CN110532911A
公开(公告)日：2019-12-03
申请号：CN201910763722.5
申请日：2019-08-19
Applicant: 南京邮电大学
Abstract: 本发明公开了一种协方差度量驱动小样本GIF短视频情感识别方法及系统。该方法首先从数据集中抽取样本构成支撑集和查询集，并将抽取的样本按照设定帧率分割为若干候选帧图像；然后利用C3D提取样本中的序列特征，同时利用CNN提取帧图像的视觉特征，然后逐帧进行哈达玛内积运算，得到最终的图像视觉特征，再采用ConvLSTM技术提取二者融合后的高层语义特征；再将支撑集样本提取的特征和查询集样本提取的特征进行拼接后通过协方差度量模块度量查询集样本和支撑集样本每类情感之间的相似性，最后利用softmax分类器预测最终的结果。本发明能有效关注GIF中图像的情感信息，同时兼顾视频流的时序特征，适用于小样本情况下的多分类视频情感分析，提高了分类准确率。
-
公开(公告)号：CN109920002B
公开(公告)日：2019-08-02
申请号：CN201910400713.X
申请日：2019-05-15
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于三维随机森林模型的头影测量图像中特征点定位方法，属于图像处理技术领域。方法包括：为每个目标特征点构建一个双层回归森林模型，并利用每个训练图像训练每个目标特征点的双层回归森林模型，得到预测的各特征点对应的位移场；对待测头影测量图像，利用已训练的各特征点对应的双层回归森林模型进行预测，获得每个特征点的位移场；根据各特征点的位移场计算得到对应的偏移距离图，根据偏移距离图计算获得每个特征点的坐标位置。本发明中每个目标特征点都有一个双层回归森林模型作为特征点检测器，第二层回归森林可以显著提升每一个预测位移场的质量，因此该方法可以比传统方法更加精确地检测到解剖特征点。
-
公开(公告)号：CN109903356A
公开(公告)日：2019-06-18
申请号：CN201910391946.8
申请日：2019-05-13
Applicant: 南京邮电大学
IPC: G06T11/00
Abstract: 本发明公开了一种基于深度多重解析网络的缺失CT投影数据估计方法，属于医学图像重建技术领域。方法包括：获取一定数量的完全CT投影数据图像，对每个图像进行部分遮挡，得到缺失部分的CT投影数据原图和具有缺失区域的缺失CT投影数据图像；将缺失部分的CT投影数据原图和具有缺失区域的缺失CT投影数据图像作为训练数据，输入预设的深度多重解析网络模型进行训练，深度多重解析网络模型使用局部鉴别器和全局鉴别器两个鉴别器；利用S2中已训练的深度多重解析网络模型进行预测得到缺失部分的CT投影数据图像；根据预测的缺失部分CT投影数据图像，重建出CT投影数据图像。本发明的方法使得生成的CT投影数据图像的缺失区域边界更具连贯性。
-
公开(公告)号：CN109544530A
公开(公告)日：2019-03-29
申请号：CN201811375758.8
申请日：2018-11-19
Applicant: 南京邮电大学
Abstract: 本发明公开了一种X射线头影测量图像结构特征点自动定位方法，包括双层回归森林模型训练：将从训练图像中提取的外观特征作为输入，训练第一层回归森林模型；将第一层回归森林模型作用于训练图像，获得训练图像对应的第一层偏移距离图；将从第一层偏移距离图中提取的外观特征和训练图像的外观特征作为输入，训练第二层回归森林模型；利用训练好的双层回归森林模型，对待检测图像结构特征点定位。本发明构建双层回归森林模型，通过双层回归森林模型对X射线头影测量图像结构特征点进行自动定位，相较于传统的人工定位，提高了效率，解决了时间，同时大大提高了准确性。
-
公开(公告)号：CN105844292B
公开(公告)日：2018-11-30
申请号：CN201610158608.6
申请日：2016-03-18
Applicant: 南京邮电大学
IPC: G06K9/62
Abstract: 本发明公开了一种基于条件随机场和二次字典学习的图像场景标注方法，针对训练集图像进行超像素区域过分割，获取每幅图像的超像素过分割区域；提取各个超像素过分割区域的特征，并结合基准标注图像构建超像素标签池，利用超像素标签池训练出支持向量机分类器，计算超像素一元势能；计算相邻超像素成对项势能；借助训练集中全局性的过分割超像素区域的类别统计，以构建应用于类别统计直方图的分类器作为分类成本，基于每一类超像素区域内关键点特征的稀疏表示的稀疏编码子之和的直方图统计作为该CRF模型的高阶势能，分别以类字典、共享字典两种判别字典经过二次稀疏表示优化稀疏编码子，更新字典和CRF参数与分类器参数；本发明提高了标注精度。
-
-
-
-
-
-
-
-
-
Search Results
75
records
(took 0.03 seconds)
