公开(公告)号：CN119697515A

公开(公告)日：2025-03-25

申请号：CN202411830492.7

申请日：2024-12-12

Applicant: 浙江大学

Inventor： 李军伟 ,  李毅 ,  吴其龙 ,  夏江南 ,  程江涵

IPC: H04N25/67 ,  H04N25/616 ,  H04N25/61

Abstract: 本发明公开了一种CMOS传感器的光子散粒噪声标定方法。该方法利用平场帧的光照均匀性，将真实信号通过平均值来近似；得到系统增益后获取低照度图像，将低照度图像减去黑电平后再除以系统增益后转换成光子数量，对光子数量施加泊松分布再乘以系统增益将光子数量还原成带光子散粒噪声的图像，从而模拟光子散粒噪声的生成。本发明在平场帧的获取时设计了由标准化24色卡和相机构成的实验装置。本发明通过像素块的设计，在每个ISO下提取各图像中各像素块所有通道信号值，计算真实信号值和数字信号方差，并对各通道进行线性拟合得到当前ISO下各通道系统增益，各通道系统增益求和取平均作为当前ISO下的系统增益。本发明标定方法操作简单、成本低、准确高效。

公开(公告)号：CN118741046A

公开(公告)日：2024-10-01

申请号：CN202410817075.2

申请日：2024-06-24

Applicant: 浙江大学

Inventor： 李军伟 ,  李毅 ,  程江涵 ,  吴其龙 ,  夏江南

IPC: H04N7/18 ,  H04L69/16 ,  H04L67/02 ,  H04L67/133

Abstract: 本发明公开了一种多功能实时显像平台，支持相机云台控制、相机图像参数配置、相机码流参数配置、相机设备参数配置、相机远程升级等功能。客户端基于HTTP+FLV+MSE的方式实现实时拉流，实现简单，延迟时间可控制在1‑2s。服务端采用开源框架ZLMediaKit进行FLV推流，性能优越，实现简单。服务端通过线程池、非阻塞套接字、基于水平触发的epoll和Reactor事件处理模型实现高并发模型，能够更好地应用于高并发场景。该平台具有良好的兼容性，能够轻松移植到任何提供相关功能的SDK的相机上。

公开(公告)号：CN119169698A

公开(公告)日：2024-12-20

申请号：CN202411183361.4

申请日：2024-08-27

Applicant: 浙江大学

Inventor： 李军伟 ,  夏江南 ,  李毅 ,  程江涵 ,  吴其龙

IPC: G06V40/20 ,  G06V10/26 ,  G06V10/82 ,  G06V10/774 ,  G06V10/80

Abstract: 本发明公开了一种基于风格转换的多模态人体姿态估计方法，包括搭建跨模态风格转换网络并进行训练，将真实的可见光图像输入到训练好的跨模态风格转换网络，得到红外风格图像；根据得到的红外风格图像构建多模态人体姿态基准；构建模态自适应姿态估计网络，包括模态特定批归一化层，将输出通过Gram矩阵计算模态风格，根据模态风格构建模态适应损失函数进行训练；将可见光和红外图像输入到训练后的模态自适应姿态估计网络，得到人体姿态估计结果。本发明的实例跨模态风格转化网络，使其拥有生成接近真实红外图像的能力；多模态人体姿态估计数据集具有高质量的标注；多模态人体姿态估计模型在多模态场景上由良好的性能和鲁棒性。

公开(公告)号：CN118674652A

公开(公告)日：2024-09-20

申请号：CN202410777911.9

申请日：2024-06-17

Applicant: 浙江大学

Inventor： 李军伟 ,  李毅 ,  夏江南 ,  吴其龙 ,  程江涵

IPC: G06T5/70 ,  G06N3/08 ,  G06N3/0464 ,  G06N3/045 ,  G06N3/0475 ,  G06N3/094 ,  G06N3/0985

Abstract: 本发明公开了一种极低照度条件下的图像去噪方法及系统。通过黑箱和可控光源构建了光照强度分别为10‑1lux，10‑2lux，10‑3lux的数据集，首次实现了光照强度可量化的数据集构建，有效解决了现有开源低照度图像数据不足的问题。将DDPM应用于图像Raw域，充分利用了DDPM的优越去噪能力，进一步提高了光照强度为10‑3lux的图像数据去噪效果。为了提高低照度图像去噪质量，添加对抗网络，通过判别器提高DDPM的去噪能力。改变了DDPM前向过程的采样方式，在DDPM前向过程中引入下采样倍率，降低分辨率后再在DDPM逆向过程中恢复分辨率，这样在Raw域下不损失训练质量的前提下加快训练速度。在U‑net模型的编码层引入空间注意力模块，从而提高网络对关键信息的表达能力。

公开(公告)号：CN118474548A

公开(公告)日：2024-08-09

申请号：CN202410630217.4

申请日：2024-05-21

Applicant: 浙江大学

Inventor： 李军伟 ,  程江涵 ,  吴其龙 ,  夏江南 ,  李毅

IPC: H04N23/741 ,  H04N23/951 ,  H04N23/84 ,  H04N23/86 ,  H04N25/58 ,  H04N1/387

Abstract: 本发明公开了一种基于FPGA的HSV域下的多曝光图像融合系统，包括图像采集模块、色域转换模块、权重生成模块和图像融合模块。本发明使用HSV域进行图像多曝光融合，在HSV域图像的颜色信息储存在H和S通道中，参与图像融合权重中的对比度系数、曝光度系数和亮度系数计算的仅有亮度分量V，能够很好的抑制颜色信息的相关性造成的干扰。由于不同曝光程度的图像的曝光时间越长其信噪比越高，为了提升融合图像信噪比本发明引入亮度系数。不同曝光程度的图像中，若同一区域的权重有剧烈变化会导致融合图像在该区域产生锯齿，为了使得图像更加平滑本发明引入像素均值。为了提升系统实时性，本发明使用FPGA作为开发平台，并对浮点数进行扩大处理，以提升FPGA设配性。