公开(公告)号：CN106331723B

公开(公告)日：2019-12-13

申请号：CN201610688578.X

申请日：2016-08-18

Applicant: 上海交通大学

Inventor： 高志勇 ,  包文博 ,  张小云 ,  陈立

IPC: H04N19/51 ,  H04N19/513 ,  H04N19/139 ,  H04N19/137

Abstract: 本发明公开一种基于运动区域分割的视频帧率上变换方法及系统，所述方法步骤为：提取视频图像的特征点；在图像之间进行特征点匹配，获取特征点的运动矢量；对特征点运动矢量聚类处理，提取运动区域信息；将运动区域的运动信息，从特征点出发，传播到图像中的其它每一个像素点，获得逐像素的运动区域分割结果和初始的逐像素运动矢量场；根据运动区域分割结果，对运动矢量场进行平滑滤波，获得优化的运动矢量场；根据运动矢量场进行补偿插值，获得内插帧图像，完成帧率的上变换。本发明能够准确地得到视频中的运动区域信息，并有效地辅助运动估计，运动矢量滤波，完成视频帧率的上变换，提高视频观看体验。

公开(公告)号：CN104301736B

公开(公告)日：2017-08-01

申请号：CN201410538367.9

申请日：2014-10-13

Applicant: 上海交通大学

Inventor： 高志勇 ,  陈立 ,  张小云 ,  郭勇 ,  薛培培

IPC: H04N19/57 ,  H04N19/513

Abstract: 本发明公开了一种减少存储带宽需求的超高清帧率上变换系统，其中：输入模块接收超高清视频图像流，经过降采样得到高清视频图像，并将原始图像及降采样后的图像存入片外存储器；运动估计模块从片外存储器读入高清分辨率下搜索窗的像素数据，计算出对应的运动矢量，此运动矢量经过缩放后作为超高清分辨率下运动矢量的粗值；矢量后处理模块接收到运动矢量粗值，对其进一步细化、平滑处理,得到运动矢量最终值；内插模块从片外存储器读入运动矢量最终值对应的参考像素块，计算出内插像素块。本发明通过只读取高清分辨率下的搜索窗而实现超高清帧率上变换，减少了片外存储带宽需求、片内存储面积和访存带宽，同时克服了降低分辨率带来的运动估计误差。

公开(公告)号：CN104268098B

公开(公告)日：2017-07-11

申请号：CN201410432183.4

申请日：2014-08-28

Applicant: 上海交通大学

Inventor： 高志勇 ,  陈立 ,  张小云 ,  郭勇 ,  薛培培

IPC: G06F12/0877 ,  G06F9/50 ,  H04N19/85 ,  H04N7/01

Abstract: 本发明提供了一种用于超高清视频帧率上变换的片上缓存系统，包括访问请求控制模块、片上存储器阵列和数据对齐模块，其中：访问请求控制模块负责仲裁外部的数据读写请求，并将标示访问请求的运动矢量映射成数据在片上存储器阵列中的地址信息；片上存储器阵列用于在超高清帧率上变换过程中，缓存参考帧搜索窗内的像元数据，实时从片外存储器更新新的像元数据，并实现不同规格像元块的随机访存；数据对齐模块用于片上存储器阵列输出像元数据后，提取出有效的像元数据，并利用不同规格像元块之间的共性，对输出像元数据组织形式进行优化，实现逻辑复用。本发明能大幅提升系统的数据吞吐率，降低系统的平均访问延时和片外访存带宽。

公开(公告)号：CN105988369A

公开(公告)日：2016-10-05

申请号：CN201510080011.X

申请日：2015-02-13

Applicant: 上海交通大学

Inventor： 徐异凌 ,  张文军 ,  孙军 ,  管云峰 ,  张小云 ,  柳宁 ,  张良慧

IPC: G05B15/02 ,  G05B19/418

Abstract: 本发明提供了一种以内容驱动的智能家居控制方法，所述方法通过基于视频中关键帧的图像主色调和/或场景情节特征对视频碎片进行标记，或者依据音频数据特征进行标记，添加相应的标签，每次播放这些多媒体内容时，标记的这些标签都会驱动智能家居设备工作。通过本发明的方法进行智能家居的驱动控制可以大大简化人为控制这一繁琐的过程，并且本发明使得控制系统更加灵活。

公开(公告)号：CN105472442A

公开(公告)日：2016-04-06

申请号：CN201510868809.0

申请日：2015-12-01

Applicant: 上海交通大学

Inventor： 张小云 ,  薛培培 ,  陈立 ,  高志勇 ,  郭勇

IPC: H04N21/433 ,  H04N21/426 ,  H04N19/42 ,  H04N19/423 ,  H04N19/433

CPC classification number: H04N21/4331 ,  H04N21/42692

Abstract: 本发明提供了一种用于超高清帧率上变换的片外缓存压缩系统，包括压缩模块和解压缩模块，其中：所述压缩模块，实时压缩来自视频输入和超高清视频帧率上变换处理内核的待压缩视频帧数据，形成压缩码流，并将压缩码流写到片外缓存中；所述解压缩模块，向片外缓存请求压缩码流，从片外缓存接收压缩码流；解压缩模块对压缩码流实时解码形成解压后像素块，并将解压后像素块输出给超高清视频帧率上变换处理内核和输出显示模块。本发明能大幅降低片外访存带宽，提升系统的数据吞吐率，降低超高清视频帧率上变换系统的功耗。

公开(公告)号：CN104915966A

公开(公告)日：2015-09-16

申请号：CN201510233587.5

申请日：2015-05-08

Applicant: 上海交通大学

Inventor： 郭勇 ,  陈立 ,  高志勇 ,  张小云 ,  薛培培

IPC: G06T7/20

CPC classification number: G06T7/277 ,  G06T2207/10016

Abstract: 本发明公开一种基于卡尔曼滤波的帧率上变换运动估计方法及系统。所述方法包括以下步骤：首先设置卡尔曼滤波模型的参数以及状态初始值，使得模型与实际系统吻合；然后通过先进行单向运动估计、后映射到内插帧的策略得到运动矢量观测值；最后采用一种增益时变的卡尔曼滤波方法对观测矢量进行更新，从而得到更为准确的运动矢量。在此方法基础上，提出一种基于卡尔曼滤波的帧率上变换运动估计硬件架构，通过交替的块扫描顺序以及并行的两路数据通道实现系统的高利用率以及高吞吐率。

公开(公告)号：CN104601992A

公开(公告)日：2015-05-06

申请号：CN201510007324.2

申请日：2015-01-07

Applicant: 上海交通大学

Inventor： 张小云 ,  胡强 ,  石志儒 ,  高志勇 ,  陈立

IPC: H04N19/109 ,  H04N19/147

Abstract: 本发明提供了一种基于贝叶斯最小风险决策的SKIP模式快速选择方法，具体步骤是：首先采用当前编码单元的SKIP模式的率失真代价作为决策特征，在线统计学习前四帧，针对不同量化参数及不同编码单元深度，通过非参数概率密度估计分别得到最优选为SKIP模式和非SKIP模式时的决策特征的条件概率分布。然后基于在线学习的统计信息，利用贝叶斯风险最小模型对剩余帧的SKIP模式进行提前判决。此方法能够在保证编码性能的情况下，可以快速的进行SKIP模式的判定，从而跳过其它不必要的预测编码模式计算，能够有效的降低HEVC编码器的编码复杂度，有利于实现HEVC编码器的实时应用。

公开(公告)号：CN104320668A

公开(公告)日：2015-01-28

申请号：CN201410608208.1

申请日：2014-10-31

Applicant: 上海交通大学

Inventor： 张小云 ,  黎凌宇 ,  高志勇 ,  陈立

IPC: H04N19/625 ,  H04N19/88 ,  H04N19/436

Abstract: 本发明提供了一种HEVC/H.265的DCT变换和反变换的SIMD优化方法，首先对输入数据进行预处理，将数据从内存装载进寄存器，视为数据矢量，对矢量数据进行交织和重新排列组合，对于垂直方向的DCT变换，将数据进行右移舍入以适应有限的寄存器位宽，提高计算并行度；然后对预处理后的数据进行蝶形运算，逐级计算对应数据的和差；而后执行点乘运算，计算蝶形运算得到的中间值和相应的变换系数乘积的和，得到输入数据和变换矩阵的乘积；最后，对矩阵乘积结果进行舍入计算，满足输出数据的位宽限定并输出。本发明在Tilera平台上能够有效加速HEVC/H.265视频编码器的DCT变换反变换模块，获得较好的加速优化效果。

公开(公告)号：CN104268098A

公开(公告)日：2015-01-07

申请号：CN201410432183.4

申请日：2014-08-28

Applicant: 上海交通大学

Inventor： 高志勇 ,  陈立 ,  张小云 ,  郭勇 ,  薛培培

IPC: G06F12/08 ,  G06F9/50 ,  H04N19/85 ,  H04N7/01

Abstract: 本发明提供了一种用于超高清视频帧率上变换的片上缓存系统，包括访问请求控制模块、片上存储器阵列和数据对齐模块，其中：访问请求控制模块负责仲裁外部的数据读写请求，并将标示访问请求的运动矢量映射成数据在片上存储器阵列中的地址信息；片上存储器阵列用于在超高清帧率上变换过程中，缓存参考帧搜索窗内的像元数据，实时从片外存储器更新新的像元数据，并实现不同规格像元块的随机访存；数据对齐模块用于片上存储器阵列输出像元数据后，提取出有效的像元数据，并利用不同规格像元块之间的共性，对输出像元数据组织形式进行优化，实现逻辑复用。本发明能大幅提升系统的数据吞吐率，降低系统的平均访问延时和片外访存带宽。

公开(公告)号：CN100517149C

公开(公告)日：2009-07-22

申请号：CN200810032744.6

申请日：2008-01-17

Applicant: 上海交通大学

Inventor： 林忠钦 ,  来新民 ,  陈关龙 ,  张延松 ,  张小云

IPC: G05B19/418 ,  G05B19/048 ,  B23K11/11

CPC classification number: Y02P90/02

Abstract: 一种焊接技术领域的分布式焊点质量监控系统及方法，系统包括：监控上位机、控制器局域网总线、分布式节点下位机，其中：监控上位机包括PC机和控制器局域网总线通讯适配卡，PC机与控制器局域网总线通讯适配卡通过PCI接口相连，控制器局域网总线通讯适配卡与各分布式节点下位机通过控制器局域网总线相连。方法包括：各下位机在线实时提取焊点压痕并发送到控制器局域网总线，PC机并将因伺服焊枪工位变动导致的焊点匹配变更信息发送到对应ID号的下位机，实时刷新分布式节点下位机判断焊点合格与否的标准库，并复位不合格焊点计数器。本发明的系统和方法可靠、总线纠错功能强、实时性好、传输距离远、可扩展性好。