公开(公告)号：CN117726548B

公开(公告)日：2024-05-10

申请号：CN202410161201.3

申请日：2024-02-05

Applicant: 南京信息工程大学

Inventor： 孙倩 ,  孙宇 ,  潘成胜

IPC: G06T5/73 ,  G06T5/60 ,  G06V20/10 ,  G06V10/44 ,  G06V10/774 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0464

Abstract: 本发明公开了一种基于跨模态特征注意力交互的全色锐化方法，包括以下步骤：（1）获取、预处理数据集，制作训练样例图像；（2）利用基于深度图像先验的上采样方法，获得全色图像空间尺度下的高光谱图像；（3）利用重叠补丁嵌入模块分解和转换上采样的高光谱图像与全色图像，分别获得光谱特征与空间特征表示；（4）利用若干光谱‑空间注意力交互模块，直接交互、融合光谱特征与空间特征，获得融合的跨模态特征表示；（5）利用图像重建层还原维度，获得高空间分辨率的高光谱图像；本发明针对高维且异构的高光谱图像与全色图像，直接交互高光谱图像特征与全色图像特征，以较少的成本开销，实现不同模态图像数据的自注意力机制运算。

公开(公告)号：CN117726548A

公开(公告)日：2024-03-19

申请号：CN202410161201.3

申请日：2024-02-05

Applicant: 南京信息工程大学

Inventor： 孙倩 ,  孙宇 ,  潘成胜

IPC: G06T5/73 ,  G06T5/60 ,  G06V20/10 ,  G06V10/44 ,  G06V10/774 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0464

Abstract: 本发明公开了一种基于跨模态特征注意力交互的全色锐化方法，包括以下步骤：（1）获取、预处理数据集，制作训练样例图像；（2）利用基于深度图像先验的上采样方法，获得全色图像空间尺度下的高光谱图像；（3）利用重叠补丁嵌入模块分解和转换上采样的高光谱图像与全色图像，分别获得光谱特征与空间特征表示；（4）利用若干光谱‑空间注意力交互模块，直接交互、融合光谱特征与空间特征，获得融合的跨模态特征表示；（5）利用图像重建层还原维度，获得高空间分辨率的高光谱图像；本发明针对高维且异构的高光谱图像与全色图像，直接交互高光谱图像特征与全色图像特征，以较少的成本开销，实现不同模态图像数据的自注意力机制运算。

公开(公告)号：CN119987102A

公开(公告)日：2025-05-13

申请号：CN202510341584.7

申请日：2025-03-21

Applicant: 南京信息工程大学

Inventor： 李元元 ,  孙宇 ,  黄晋豪 ,  尹乐天 ,  顾玉树 ,  张子健 ,  常建华

IPC: G02F1/35

Abstract: 本发明公开了一种基于低温相变异质结构的非线性光学开关及其制备方法，所述器件包括二维多层半导体、二氧化钒相变薄膜及基底，其中二氧化钒相变薄膜具有低温的绝缘体‑金属可逆相变特性，二维多层半导体具有本征或人工设计的反转对称性破缺特性。本发明所述基于低温相变异质结构的非线性光学开关通过二氧化钒薄膜的低温相变实现对二维多层半导体非线性光学响应的动态调控，呈现可逆的非线性光学开关特性，同时本发明通过构建普适性的界面光场叠加的物理模型，综合考虑二维多层半导体中每一层的非线性光场产生、层与层之间的传播和转角叠加以及多重反射与干涉效应，对二维多层半导体/VO2的低温相变异质结构在金属态和绝缘态下非线性光信号强度和开关比进行定量计算，实现高开关比宽谱响应的低温相变异质结构非线性光学开关的具体结构参数设计。