-
公开(公告)号:CN102595137B
公开(公告)日:2014-08-27
申请号:CN201210046346.6
申请日:2012-02-27
Applicant: 上海交通大学
IPC: H04N19/137 , H04N19/567
Abstract: 本发明公开一种基于图像像素块行/列流水线的快速模式判决装置和方法,本发明采取了像元行/列的模块流水技术,即在处理一个宏块6个8x8块过程中,以8x8块为单位进行模式选择,采用像元行/列级流水处理方式,每级流水都只需要一个时钟。另外,本发明还可以选择同时或者单独采取候选模式轮询技术,或/和采取RDO和SAD判据相结合的模式判别方法对模式进行决策。本发明完成一个宏块的模式判决过程只需要不到400个时钟周期,能够以不到150MHz的系统频率满足每秒30帧1920x1080高清视频图像实时编码的需求。
-
公开(公告)号:CN102595137A
公开(公告)日:2012-07-18
申请号:CN201210046346.6
申请日:2012-02-27
Applicant: 上海交通大学
Abstract: 本发明公开一种基于图像像素块行/列流水线的快速模式判决装置和方法,本发明采取了像元行/列的模块流水技术,即在处理一个宏块6个8x8块过程中,以8x8块为单位进行模式选择,采用像元行/列级流水处理方式,每级流水都只需要一个时钟。另外,本发明还可以选择同时或者单独采取候选模式轮询技术,或/和采取RDO和SAD判据相结合的模式判别方法对模式进行决策。本发明完成一个宏块的模式判决过程只需要不到400个时钟周期,能够以不到150MHz的系统频率满足每秒30帧1920x1080高清视频图像实时编码的需求。
-
公开(公告)号:CN108989751B
公开(公告)日:2020-07-14
申请号:CN201810784634.9
申请日:2018-07-17
Applicant: 上海交通大学
Abstract: 本发明公开了一种基于光流的视频拼接方法,包括:步骤S1:左右帧图像的读取及预处理;步骤S2:计算左右帧图像的对应公共区域,并对公共区域做密集光流估计;步骤S3:将公共区域的密集光流聚类成三类;步骤S4:对非公共区域进行光流的延伸估计,并将非基准帧按照光流投影到基准帧上构成初步全景图;步骤S5:初步全景图中遮蔽区域的检测与校正;步骤S6:回到步骤S1,读取下一对左右帧图像。本发明所述方法针对相机方向固定的同步监控视频,通过上述步骤能够准确地找到左右帧图像公共区域间的对应关系,得到效果良好的全景视频,很大程度地弱化了对运动物体造成的模糊和扭曲效果。
-
公开(公告)号:CN106210767B
公开(公告)日:2020-01-07
申请号:CN201610656968.9
申请日:2016-08-11
Applicant: 上海交通大学
IPC: H04N21/234 , H04N21/2343 , H04N21/44 , H04N21/4402
Abstract: 本发明公开一种智能提升运动流畅性的视频帧率上变换方法及系统,所述方法包括以下步骤:步骤一,对连续的两帧原始视频图像进行预分析;步骤二,对两帧图像进行运动估计;步骤三,在两帧原始图像之间,根据估计的运动信息计算出新的内插帧;步骤四,对内插帧图像进行空洞填补、块效应滤波、图像质量评价等后处理;步骤五,综合前面四个步骤的信息判断是否用重复帧替代内插帧。在此方法基础上,提出一种智能的提升运动流畅性的视频帧率上变换系统,通过帧率上变换各个处理模块的流水控制,实现各模块信息的高复用和高并行。本发明能够在源端实现高质量的视频帧率提升,智能地提升视频运动流畅性。
-
公开(公告)号:CN106210449B
公开(公告)日:2020-01-07
申请号:CN201610657029.6
申请日:2016-08-11
Applicant: 上海交通大学
IPC: H04N5/14
Abstract: 本发明公开一种多信息融合的帧率上变换运动估计方法及系统,方法步骤为:读取前后两帧图像,分别对其进行降采样,对降采样的图像进行基于光流法的运动估计,对原始图像进行块匹配的运动估计,提取前后两帧图像的SIFT特征,计算特征向量并进行特征匹配,得到特征匹配的运动矢量,对块匹配运动矢量、特征匹配运动矢量和光流法运动矢量进行融合,运动矢量的传递。本发明相对比传统基于块匹配的运动估计算法,精度提升明显。针对一般的光流估计算法,在小物体运动矢量以及运动边界矢量保持上具有更好的性能。
-
公开(公告)号:CN109996071A
公开(公告)日:2019-07-09
申请号:CN201910240535.9
申请日:2019-03-27
Applicant: 上海交通大学
IPC: H04N19/124 , H04N19/13 , H04N19/147
Abstract: 本发明公开了一种基于深度学习的可变码率图像编码系统及方法,包括:正向多尺度分解变换网络模块,将输入原始图像分解为多个尺度的图像特征;量化模块,将图像特征量化成整数;自适应码率分配模块,根据给定的目标码率对量化成整数的图像特征进行块级别的码率分配;熵编解码模块,将进行码率分配后的图像特征编码为二进制码流;同时提供了一种可变码率图像解码系统及方法,用于解码上述编码系统及方法形成的编码。本发明使用深度卷积神经网络构建正反多尺度分解变换,利用大量数据进行训练得到最优模型参数,结合基于图像复杂度的自适应码率分配方法,在实际应用中可实现可变码率图像编解码。
-
公开(公告)号:CN105407357B
公开(公告)日:2019-07-05
申请号:CN201510885787.9
申请日:2015-12-04
Applicant: 上海交通大学
IPC: H04N19/503 , H04N19/51 , H04N19/567
Abstract: 本发明提供一种基于聂曼‑皮尔逊准则的SKIP模式快速选择方法,步骤是:将一个预测单元预测模式判定建模为“SKIP模式”和“非SKIP模式”两类的分类问题,采用当前编码单元的SKIP模式的率失真代价作为决策特征,在线统计学习前四帧,针对不同量化参数及不同编码单元深度,通过非参数概率密度估计分别得到最优选为SKIP模式和非SKIP模式时的决策特征的条件概率分布。然后基于在线学习的统计信息,利用聂曼‑皮尔逊判定准则对剩余帧的SKIP模式进行提前判决。基于聂曼‑皮尔逊准则,在限制SKIP模式错判概率的前提下,尽可能多的减少SKIP模式漏判概率,即在保证编码的率失真性能情况下,最大可能的提高编码速度。
-
公开(公告)号:CN109889839A
公开(公告)日:2019-06-14
申请号:CN201910240106.1
申请日:2019-03-27
Applicant: 上海交通大学
IPC: H04N19/167 , H04N19/146 , H04N19/147 , H04N19/91 , H04N19/182 , H04N19/124 , H04N19/44 , H04N19/33
Abstract: 本发明公开了一种基于深度学习的感兴趣区域图像编码系统及方法,包括感兴趣区域编码网络模块、码率分配模块和熵编码模块。图像输入系统后,感兴趣区域编码网络模块同时对输入图像进行正向多尺度分解变换以及感兴趣区域分割预测,得到图像的多尺度特征和感兴趣区域掩模,再经过码率分配模块为感兴趣区域分配更多的特征,分配后的特征经过量化和熵编码得到二进制码流;同时提供了一种感兴趣区域图像解码系统及方法,用于解码上述编码系统及方法形成的编码。本发明使用深度学习技术构建感兴趣区域编解码网络和熵编解码器,利用大量数据训练得到最优模型参数,在实际应用中可达到显著优于现有感兴趣编码系统的主观和客观的编码性能。
-
公开(公告)号:CN104320656B
公开(公告)日:2019-01-11
申请号:CN201410603770.5
申请日:2014-10-30
Applicant: 上海交通大学
IPC: H04N19/103 , H04N19/132 , H04N19/147
Abstract: 本发明提供了一种x265编码器中帧间编码模式快速选择方法,该方法首先采用工具软件分析x265编码器中耗时模块或函数,然后针对耗时部分进行具体的优化工作,在保证性能的前提下采用快速算法或者结构调整来达到速度的提升,优化内容包括:SKIP模式的提前检测、以SATD Cost(哈达玛变换后再绝对值求和)代替RD Cost(率失真优化得到的值)作为层内模式选择的标准。对于x265编码器,本发明能够实现高清视频序列实时编码,性能与原来非实时编码相比峰值信噪比下降0.03dB。
-
公开(公告)号:CN105472389B
公开(公告)日:2018-11-16
申请号:CN201510870385.1
申请日:2015-12-01
Applicant: 上海交通大学
IPC: H04N19/42 , H04N19/423 , H04N19/433 , H04N21/426 , H04N21/433
Abstract: 本发明提供了一种用于超高清视频处理系统的片外缓存压缩方法,步骤为:压缩:将来自原始视频输入端的视频帧数据和来自处理内核的完成视频处理功能的视频帧数据进行分组,以形成待压缩块,并对每个待压缩块进行块内像素分组、预测、量化、反量化和像素重建、熵编码、码流打包、简化压缩处理以及压缩码流输出控制操作,得到压缩码流,并将压缩码流写到片外缓存中;解压缩:从片外缓存读取压缩码流,经过码流解析、熵解码、反量化、像素形成、简化压缩处理解码以及像素块复原处理后实时解码,形成解压后像素块,并将解压后像素块输出给处理内核和输出显示模块。本发明能大幅降低片外访存带宽,提升系统的数据吞吐率。
-
-
-
-
-
-
-
-
-