-
公开(公告)号:CN119299775A
公开(公告)日:2025-01-10
申请号:CN202411246925.4
申请日:2024-09-06
Applicant: 南京大学
IPC: H04N21/4402 , H04N21/44 , H04N21/2343 , H04N21/234
Abstract: 本发明公开了一种基于区域感知的视频分级编解码系统及方法,方法包括:区域感知阶段:将获取的监控视频划分视频段,基于视频段处理视频帧,并通过服务器反馈的参考帧处理结果识别后续连续帧的区域信息,按照视频的应用将每个视频段的帧集在空间上划分为多个不同等级的视频子段;编码阶段:使用不同的配置参数将视频子段编码为不同质量的视频子流;解码阶段:将视频子流解码还原为视频子段所对应的帧,合并为视频帧。本发明充分考虑了视频的时间冗余和空间冗余,大幅降低了所传输的视频带宽;此外,所实现的区域感知机制克服了摄像头资源的限制,不仅满足视频应用的实时处理需求,还可以部署在大多数没有GPU资源的摄像头上。
-
公开(公告)号:CN118118695A
公开(公告)日:2024-05-31
申请号:CN202410218152.2
申请日:2024-02-28
Applicant: 南京大学
IPC: H04N19/88 , H04N19/132 , H04N19/159 , H04N19/196 , H04N21/234 , H04N21/44
Abstract: 本发明公开一种基于多模态融合的多视频流实时拼接系统及方法,包括:参考帧拼接模块,其包括:邻接图计算模块和基于置信度的拼接模块;邻接图计算模块,用于判断多视频之间的邻接关系,并计算视频流中图像特征的置信度与传感器的置信度;基于置信度的拼接模块,用于将视频帧画面以高置信度优先的方式进行拼接;预测帧拼接模块,其包括:拼接模块和参考帧矫正模块;拼接模块,用于在参考帧的基础上对当前时刻的视频帧拼接结果进行预测;参考帧矫正模块,用于对参考帧的结果进行更新。本发明采用双模态相互检验的方式计算不同视频流不同模态的置信度,基于置信度对视频帧进行拼接,在视觉模态和传感器模态存在一定误差时仍能够保证拼接的准确性。
-
公开(公告)号:CN111950810B
公开(公告)日:2023-12-15
申请号:CN202010876972.2
申请日:2020-08-27
Applicant: 南京大学
IPC: G06F18/27 , G06N3/0464 , G06N3/0442 , G06F18/214 , G06F17/18 , G06N3/045
Abstract: 本发明公开了一种基于自演化预训练的多变量时间序列预测方法和设备,所述方法基于预训练策略与卷积网络、长短记忆网络深度序列模型,结合单变量自演化信息与多变量依赖关系信息进行建模,实现了多变量时间序列预测的优化算法,同时兼顾了整体预测精度和局部单变量的预测精度。本发明具有较好的整体预测精度,对于局部单变量的预测精度保障性方面优于现有的多变量时间序列预测方法。
-
公开(公告)号:CN117218725A
公开(公告)日:2023-12-12
申请号:CN202311346663.4
申请日:2023-10-18
Applicant: 南京大学
IPC: G06V40/20 , G06V20/40 , G06V10/77 , G06V10/774 , G06V10/82 , G06F40/126 , G06F40/58 , G06N3/0464 , G06N3/08
Abstract: 本发明公开了一种基于边缘设备的实时手语识别与翻译系统及方法,包括:视频数据采集模块,用于采集手语视频数据;视频预处理模块,包括:视频帧尺寸调整模块、数据归一化模块及视频帧灰度化模块;手语模型模块,用于得到手语模型;结构重参数化模块对手语模型模块得到的手语模型进行优化,得到优化后的手语模型;并保证优化后的模型输出不变。本发明通过提取手语关键局域区域特征与全局帧特征,并将这些特征构建为一个区域感知时空图,利用浅层图卷积网络提取手语特征,并基于所提取的特征训练手语模型,采用结构重参数化技术优化模型,再采用优化后的模型将手语视频识别为单词序列及翻译为自然语言文本。
-
公开(公告)号:CN113296946B
公开(公告)日:2023-11-17
申请号:CN202110563103.9
申请日:2021-05-24
Applicant: 南京大学
Abstract: 本发明公开了一种边端协同的并发实时流式数据分析任务处理方法及设备。所述方法包括以下步骤:基于帕累托最优对服务器站点上运行的实时流式数据分析任务的配置进行初步筛选,确定实时流式数据分析任务的可选配置集合;根据实时流式数据分析任务的可选配置集合,基于服务器站点执行任务的总效用值最大化的原则为该站点上执行的所有实时流式数据分析任务选择侧写策略和执行策略;根据确定的侧写策略以及执行策略执行实时流式数据分析任务。该方法通过在服务器站点分配较少资源用于实时流式数据分析任务各个配置的侧写过程,将节省下来的资源用于任务的执行过程,实现在较小的影响当前周期内的执行准确率的情况下,实现长期的准确率方面的优化。
-
公开(公告)号:CN111381950B
公开(公告)日:2023-07-21
申请号:CN202010147501.8
申请日:2020-03-05
Applicant: 南京大学
Abstract: 本发明公开了一种面向边缘计算环境基于多副本的任务调度方法和系统。所述方法包括:定期测量和收集每个边缘集群内任务的执行状态,建立本集群的任务时间延迟因子分布概率模型,所述模型描述了集群的资源性能;基于最短剩余处理时间原则和公平共享原则预估各作业可执行任务需要的副本数;基于各作业当前进度和集群的资源性能,采用迭代分配方式将各集群的空闲节点,根据预估的副本数,分配给各个任务;将分配到节点的任务调度到相应的集群来执行。利用本发明能够在真实系统中有效利用边缘计算环境中的空闲资源,通过合理的设定任务副本,降低作业的运行时延。
-
公开(公告)号:CN110119478B
公开(公告)日:2023-07-21
申请号:CN201910403221.6
申请日:2019-05-15
Applicant: 南京大学
IPC: G06F16/9535 , G06F16/2458
Abstract: 本发明公开了一种结合多种用户反馈数据的基于相似度的物品推荐方法。方法包括:对复杂辅助信息中隐含语义信息进行建模,针对不同类型用户反馈类型,采用不同的异步双向游走方式,计算不同类型对象间的相似度,再将这些相似度计算结果以贝叶斯排序优化技术组合,再根据组合后的用户‑物品相似度矩阵向每个用户生成Top‑N推荐结果。本发明提出的随机游走方法能建模出路径内任意节点对最终该路径计算结果的影响,从而能够充分挖掘隐含语义并量化语义得到不同类型对象间的相似度。
-
公开(公告)号:CN116451811A
公开(公告)日:2023-07-18
申请号:CN202310349411.0
申请日:2023-04-04
Applicant: 南京大学
Abstract: 本文发明公开了一种基于MDS编码的联邦学习安全聚合方法及系统。所述方法面向基于安全聚合的联邦学习计算框架,利用数据加密,数据拆分等方法,保证用户在参与联邦学习训练的同时,隐私数据不被泄露。同时本方法通过服务器调度,MDS编码等方法解决了基于安全聚合的联邦学习中存在的由于用户掉线导致的聚合结果无效的问题,保证了最终聚合结果的可用性,提升了整个系统的健壮性。并且该方法与已有方法相比有着更低的计算开销,提高了联邦学习的学习效率。
-
公开(公告)号:CN113505021B
公开(公告)日:2023-07-18
申请号:CN202110577964.2
申请日:2021-05-26
Applicant: 南京大学
IPC: G06F11/14
Abstract: 本发明公开了一种基于多主节点主从分布式架构的容错方法及系统。所述方法包括:S10、为工作节点分配计算任务并设计容忍落后者问题的编码计算方案;S20、工作节点完成本地计算并根据一定策略将计算结果传输至各个主节点;S30、主节点接收来自各个工作节点的计算结果并根据解码方案生成中间值。通过多个主节点与工作节点合作完成迭代计算任务中的聚合工作以降低每个节点处的工作负载。通过对每个工作节点计算结果使用编码生成冗余数据,可以避免工作节点计算结果丢失,以应对主节点出错的情形。
-
公开(公告)号:CN116400100A
公开(公告)日:2023-07-07
申请号:CN202310182550.9
申请日:2023-03-01
Applicant: 南京大学
Abstract: 本发明公开了一种融合声波和惯性感知的风速测量系统和方法,方法适用于包含惯性传感器和两组音频收发器件的移动智能终端,包括以下步骤:根据惯性传感器获取终端的初始位姿,并通过音频器件采集风速的第一分量;旋转终端多次,在每次旋转结束时计算终端相较于初始位姿的旋转角度以及风速对应的分量;联立各个分量以及对应的旋转角度计算风速值并确定风向。本发明不需要借助额外的器件,也无需对终端的硬件进行任何修改,便可以对风速进行有效测量。
-
-
-
-
-
-
-
-
-