-
公开(公告)号:CN119904720A
公开(公告)日:2025-04-29
申请号:CN202411958642.2
申请日:2024-12-30
Applicant: 广州市南沙区北科光子感知技术研究院 , 北京信息科技大学
IPC: G06V10/80 , G06V10/82 , G06N3/0464 , G06N3/08 , G06N3/045
Abstract: 本发明涉及图像处理技术领域,提供了一种基于角点注意力的照度感知红外与可见光图像融合方法,该方法包括:将红外图像和可见光图像输入各自对应的特征提取器进行逐级迭代的特征提取,并计算预设特征提取层级的差分红外图像角点特征和差分可见光图像角点特征,并将差分红外图像角点特征融合入相应特征提取层级所提取的层级红外图像特征中,将差分可见光图像角点特征融合入相应特征提取层级所提取的层级可见光图像特征中;将获得的可见光图像特征和红外图像特征进行拼接获得拼接图像特征,并将拼接图像特征输入预设的图像重构器进行图像重构,以获得融合图像。本发明能够更加细致地关注到纹理细节、边缘以及结构在融合过程中的表现。
-
公开(公告)号:CN119599068A
公开(公告)日:2025-03-11
申请号:CN202411537434.5
申请日:2024-10-31
IPC: G06N3/0495 , G06N3/0464 , G06N3/084 , G06V10/42 , G06V10/52 , G06T3/4053 , G06T3/4046
Abstract: 本发明涉及数字图像处理领域,公开了基于频域卷积的图像超分辨率的轻量化神经网络模型,包括多尺度小波卷积模块、网络模块、特征提取模块。所述多尺度小波卷积模块首先进行逐点卷积以进行通道维度的升维,随后进行小波变换得到频率域特征,包含更多的图像细节信息,随后对低频、水平、垂直、对角频率分量采用不同的卷积核Ki,实现频率域多尺度特征提取。通过设计了一个新型多尺度小波卷积模块,在轻量化通道可分离卷积的基础上结合了小波变换,在频率域精细提出图像特征,根据不同频率的特征采用不同的卷积核处理,以此实现轻量化多尺度特征提取,从而能够达到在增加少量参数和计算量的情况下显著增强网络泛化性能,提高图片的分辨率的效果。
-
公开(公告)号:CN118196885A
公开(公告)日:2024-06-14
申请号:CN202410077116.9
申请日:2024-01-18
Applicant: 北京信息科技大学
IPC: G06V40/20 , G06V10/52 , G06V10/77 , G06V10/80 , G06V10/82 , G06N3/045 , G06N3/048 , G06N3/0495 , G06N3/08
Abstract: 本发明提供了一种基于深度学习的小鼠姿态估计方法及系统,包括:获取待姿态估计的小鼠图像;将所述小鼠图像输入预先训练的基于深度学习的姿态估计模型,获得小鼠姿态估计结果;其中,所述姿态估计模型具体执行如下过程:对于输入的小鼠图像,顺序提取其第一尺度、第二尺度、第三尺度以及第四尺度特征;对于第二尺度、第三尺度以及第四尺度特征,分别与预设的特征融合模块的输出特征进行融合,使每一尺度特征均与其它尺度的特征进行融合,获得对应的融合特征;基于获得的每一尺度所对应的融合特征,分别利用其对应的回归检测头进行关键点检测;基于检测的关键点实现小鼠姿态估计。
-
公开(公告)号:CN115641494B
公开(公告)日:2024-05-31
申请号:CN202211315084.9
申请日:2022-10-26
Applicant: 广州市南沙区北科光子感知技术研究院 , 北京信息科技大学
IPC: G06V10/82 , G06V30/19 , G06N3/0464
Abstract: 本发明提供了一种基于微环调制器的神经网络图像处理系统,包括:阵列的多个激光器,以及多个全通型微环,每个激光器连接的每个全通型微环的输入端,其中,通过对每个所述全通型微环施加恒定电压,使输出的光强值与待处理图像的像素值成正比;每个全通型微环的输出端通过波分复用器连接至分插复用型微环的输入端,分插复用微环的输出端连接至平衡探测器,将分插复用微环输出的光信号转换成电信号并进行乘法运算,其中,通过对分插复用微环施加恒定电压,使分插复用微环的输入信号的光强值与输出信号的光强值成对应比值,比值为卷积核的参数值;平衡探测器连接至跨阻放大器。本发明极大的提高了图像处理过程中的运算速度。
-
公开(公告)号:CN117745560A
公开(公告)日:2024-03-22
申请号:CN202311789750.7
申请日:2023-12-22
Applicant: 北京信息科技大学
IPC: G06T5/50 , G06T5/60 , G06N3/0464 , G06N3/08
Abstract: 本发明属于图像处理技术领域,提供了一种基于通道注意力的红外和可见光图像融合方法及系统,图像融合网络模型包括编码层、融合层和解码层;在融合层中,将编码层输出的两个特征图各自经过一个卷积,通过逐元素相加的融合方式,得到初步融合结果;以初步融合结果为基础,对通道特征的空间尺度进行压缩实现,得到每个通道的信息,然后通过两层的全连接层网络实现先降维再升维操作,先获得一个紧凑的特征向量为红外光和可见光两个分支的自适应选择提供指导,然后通过升维获得两个分支的特征向量,通过对通道特征的降维再升维变换,能够捕获具备更多纹理信息的特征进行通道选择,强化了红外和可见光的显著目标,获得了更好的融合的效果。
-
公开(公告)号:CN117332837A
公开(公告)日:2024-01-02
申请号:CN202311337071.6
申请日:2023-10-16
IPC: G06N3/067 , G06N3/0464
Abstract: 本发明提供了一种基于等离子色散效应调制的光子卷积神经网络芯片,包括脉冲生成模块、信号加载模块、卷积处理模块和光电转换模块;脉冲生成模块,用于生成m行光脉冲,每一行光脉冲包括n个不同波长的光脉冲;信号加载模块对输入信号加载模块的图像数据与光脉冲调制成映射关系,使光脉冲携带图像数据;卷积处理模块将携带图像数据的光脉冲与卷积核权重调制成映射关系,对光脉冲携带的图像数据进行卷积运算;光电转换模块,包括m个平衡探测器,每一行叉复用微环谐振器连接每一个平衡探测器;每一个平衡探测器依次连接跨阻放大器和电流加法器。本发明使数据的存储运算一体化,提高了卷积的计算速度,提升计算的吞吐量,降低了计算的功耗。
-
公开(公告)号:CN112641512B
公开(公告)日:2023-11-10
申请号:CN202011442815.7
申请日:2020-12-08
Applicant: 北京信息科技大学
Abstract: 本发明一种应用于手术机器人前规划的空间配准方法,方法涉及手术机器人空间导航方法,具体的说是一种把基于医学图像的三维建模与患者的位姿进行配准。所谓配准是指空间同一个点在两个不同的坐标系的坐标值之间的一对一的映射或转换,即在两个不同坐标系中分别描述同一个点,该点在两种坐标之间的映射。在颅颌面肿瘤手术中,空间配准(又称术中配准)是关乎手术成功与否的关键因素,通过立体定位跟踪系统,在手术中确定机器人末端手术操作器械与患者的对应关系,并与术前重建的医学图像整合显示在一起,这样医学图像才能被有效地用来实时引导机器人定位及辅助穿刺手术的进行。本文选用基于固定在病人头骨上的外部标记点的配准方法来实现颅颌面肿瘤手术机器人的术中空间配准。
-
公开(公告)号:CN115641494A
公开(公告)日:2023-01-24
申请号:CN202211315084.9
申请日:2022-10-26
Applicant: 广州市南沙区北科光子感知技术研究院 , 北京信息科技大学
IPC: G06V10/82 , G06V30/19 , G06N3/0464
Abstract: 本发明提供了一种基于微环调制器的神经网络图像处理系统,包括:阵列的多个激光器,以及多个全通型微环,每个激光器连接的每个全通型微环的输入端,其中,通过对每个所述全通型微环施加恒定电压,使输出的光强值与待处理图像的像素值成正比;每个全通型微环的输出端通过波分复用器连接至分插复用型微环的输入端,分插复用微环的输出端连接至平衡探测器,将分插复用微环输出的光信号转换成电信号并进行乘法运算,其中,通过对分插复用微环施加恒定电压,使分插复用微环的输入信号的光强值与输出信号的光强值成对应比值,比值为卷积核的参数值;平衡探测器连接至跨阻放大器。本发明极大的提高了图像处理过程中的运算速度。
-
-
公开(公告)号:CN112710647A
公开(公告)日:2021-04-27
申请号:CN202011411630.X
申请日:2020-12-03
Applicant: 北京信息科技大学
IPC: G01N21/65
Abstract: 本发明涉及一种用于水污染检测的光纤拉曼探针,光纤拉曼探针主要有激发光纤、收集光纤、聚焦镜头、拉曼增强基底反射镜组成。激发光通过探针激发光纤,激发在拉曼增强基底反射镜上的水溶液,所激发的拉曼信息由收集光纤收集,送入拉曼光谱仪进行分析。在探针前端,设计聚焦镜头提高激发和收集效率,增加滤光片组,降低拉曼光谱信号信噪比。探针主要通过拉曼增强基底反射镜的设计,大幅度提高水污染中物质指标的拉曼光谱,实现拉曼光谱的定性与定量分析。
-
-
-
-
-
-
-
-
-