-
公开(公告)号:CN118606900A
公开(公告)日:2024-09-06
申请号:CN202411081166.0
申请日:2024-08-08
Applicant: 中国民用航空飞行学院
IPC: G06F18/25 , G06F40/284 , G06V20/70 , G06V10/82 , G06N3/0455 , G06N3/08
Abstract: 本发明涉及涉及图像处理和计算机视觉技术领域,公开基于双模态交互的开放词汇三维场景理解方法,包括以下步骤:将原始点云数据输入三维场景理解模型,得到三维场景理解特征,所述三维场景理解特征同时具有文本信息描述和点云特征向量;所述三维场景理解模型包括点云特征提取网络、预训练图像语义提案网络、预训练图像生成文本网络、预训练文本编码网络、自适应语言文本编码器;构建损失函数对所述三维场景理解模型进行训练,所述损失函数包括实例预测损失函数、分类损失函数、图文匹配损失函数、关联损失函数。本发明结合点云、图像和语言类的模型,通过开放词汇和未见类别提高对三维场景的理解。
-
公开(公告)号:CN118397282B
公开(公告)日:2024-08-30
申请号:CN202410849292.X
申请日:2024-06-27
Applicant: 中国民用航空飞行学院
IPC: G06F7/544
Abstract: 本发明涉及计算机视觉技术领域,公开基于语义SAM大模型的三维点云鲁棒性部件分割方法,包括步骤:将三维点云数据通过多视角投影到二维深度图;使用语义SAM大模型融合各个视角下的二维深度图,得到融合特征图,以学习融合特征图中的部件级语义信息;通过适配器模块微调语义SAM大模型,将各个视角的二维深度图作为训练数据,对语义SAM大模型进行训练,使语义SAM大模型输出二维分割结果;语义SAM大模型将输出的二维分割结果集成回三维点云数据中,实现部件的三维点云分割。本发明提升了三维点云分割在复杂环境下的鲁棒性。
-
公开(公告)号:CN116152267B
公开(公告)日:2023-07-04
申请号:CN202310448684.0
申请日:2023-04-24
Applicant: 中国民用航空飞行学院
IPC: G06T7/10 , G06V10/764 , G06V10/80
Abstract: 本发明涉及基于对比性语言图像预训练技术的点云实例分割方法,包括步骤:获取点云数据,进行预处理后,得到文本信息、点云训练数据集;构建跨模态预训练模型,跨模态预训练模型包括稀疏卷积神经网络、预训练编码网络、预测网络;将点云训练数据集输入稀疏卷积神经网络,得到体素级别的点云特征;将文本信息与体素级别的点云特征进行融合,得到融合点云特征;对融合点云特征进行线性投影得到实例掩码特征,对文本信息提取出文本特征,将融合点云特征、实例掩码特征、文本特征输入预训练编码网络,得到查询的向量值;将查询的向量值输入预测网络,得到分割的实例结果。本发明在将融合点云特征和文本特征整合在一起,能够更好地捕获这两类信息。
-
公开(公告)号:CN116137023B
公开(公告)日:2023-06-20
申请号:CN202310425949.5
申请日:2023-04-20
Applicant: 中国民用航空飞行学院
Abstract: 本发明涉及基于背景建模和细节增强的低照度图像增强方法,包括步骤:获取若干张低照度图像和配对的正常光照图像,并进行预处理,得到训练数据集;构建图像增强网络模型,并使用目标损失函数对图像增强网络模型进行约束;使用训练数据集对所述图像增强网络模型进行训练,直到误差收敛到预设值,得到训练好的图像增强网络模型。本发明的图像增强网络模型能对低照度图像进行背景建模,以及细节恢复,并设计全局特征融合增强模块实现全局信息融合和自适应增强。能对低照度条件下捕获的图像进行增强,解决低照度图像低对比度、色彩失真、噪声放大、细节丢失等问题。
-
公开(公告)号:CN116137023A
公开(公告)日:2023-05-19
申请号:CN202310425949.5
申请日:2023-04-20
Applicant: 中国民用航空飞行学院
Abstract: 本发明涉及基于背景建模和细节增强的低照度图像增强方法,包括步骤:获取若干张低照度图像和配对的正常光照图像,并进行预处理,得到训练数据集;构建图像增强网络模型,并使用目标损失函数对图像增强网络模型进行约束;使用训练数据集对所述图像增强网络模型进行训练,直到误差收敛到预设值,得到训练好的图像增强网络模型。本发明的图像增强网络模型能对低照度图像进行背景建模,以及细节恢复,并设计全局特征融合增强模块实现全局信息融合和自适应增强。能对低照度条件下捕获的图像进行增强,解决低照度图像低对比度、色彩失真、噪声放大、细节丢失等问题。
-
公开(公告)号:CN114219302A
公开(公告)日:2022-03-22
申请号:CN202111542404.X
申请日:2021-12-13
Applicant: 中国民用航空飞行学院
Abstract: 本发明公开了面向飞行技能全生命周期的飞行员作风胜任力画像方法,涉及飞行员作风胜任力评估领域,S1,获取航空管理数据总集,从航空管理数据总集中提取备选飞行员数据集,并依次对备选飞行员数据集进行数据清洗、标准化处理,得到飞行员作风样本集;S2,输入飞行员作风样本集,并建立飞行员作风评估模型,通过飞行员作风评估模型对飞行员作风样本集进行胜任力评估,得到飞行员多元作风胜任力评估指数;S3,通过可视化单元汇总飞行员多元作风胜任力评估指数,并判断飞行员多元作风胜任力评估指数是否达到标准值,若否,则返回步骤S1,重新获取备选飞行员数据集;若是,则完成飞行员作风胜任力的评估。
-
公开(公告)号:CN118606900B
公开(公告)日:2024-10-11
申请号:CN202411081166.0
申请日:2024-08-08
Applicant: 中国民用航空飞行学院
IPC: G06F18/25 , G06F40/284 , G06V20/70 , G06V10/82 , G06N3/0455 , G06N3/08
Abstract: 本发明涉及涉及图像处理和计算机视觉技术领域,公开基于双模态交互的开放词汇三维场景理解方法,包括以下步骤:将原始点云数据输入三维场景理解模型,得到三维场景理解特征,所述三维场景理解特征同时具有文本信息描述和点云特征向量;所述三维场景理解模型包括点云特征提取网络、预训练图像语义提案网络、预训练图像生成文本网络、预训练文本编码网络、自适应语言文本编码器;构建损失函数对所述三维场景理解模型进行训练,所述损失函数包括实例预测损失函数、分类损失函数、图文匹配损失函数、关联损失函数。本发明结合点云、图像和语言类的模型,通过开放词汇和未见类别提高对三维场景的理解。
-
公开(公告)号:CN118351320A
公开(公告)日:2024-07-16
申请号:CN202410780784.8
申请日:2024-06-18
Applicant: 中国民用航空飞行学院 , 浪潮智能物联技术有限公司
IPC: G06V10/26 , G06V10/44 , G06V10/80 , G06V10/764 , G06V10/82 , G06N3/0464 , G06N3/0499 , G06N3/048 , G06V10/28 , G06T7/10 , G06T7/73
Abstract: 本发明公开了一种基于三维点云的实例分割方法,属于图像处理和计算机视觉技术领域,步骤如下:获取并预处理点云数据,得到点云训练数据集;提取点云数据的特征,得到点云级别数据特征和各超点的综合特征;通过编码与二类聚值的方法进行分类和聚合,得到初始化位置编码、初始化位置查询向量和高密度点查询向量;基于交叉注意力机制进行向量融合,得到实例融合特征;对实例的中心位置和边界位置进行预测,并卷积生成分割掩码,且转化为预测掩码;根据二分匹配方法和图模型,对预测掩码和真实掩码进行匹配和匹配程度评估,并执行三维点云的实例分割。本发明解决了现有三维点云实例分割技术在处理紧密相邻对象和实时场景理解方面存在的局限性问题。
-
公开(公告)号:CN114237110A
公开(公告)日:2022-03-25
申请号:CN202111523385.6
申请日:2021-12-13
Applicant: 中国民用航空飞行学院
IPC: G05B19/042
Abstract: 本发明公开基于多模态数据驱动的通用航空机队可靠性监测预警系统,涉及空中交通服务技术领域,克服航空机队的运行数据相对独立、难以交互的问题,基于客观获取的运行数据,采用多模态信息融合驱动的方式对航空机队的运行数据进行重构整和,打破了多方位运行数据之间的关联壁垒,能够有效反映运行数据之间的联系,并通过叶贝思推理模型的训练计算,根据运行数据有效判断出当前获取数据所属的预警情况,发出预警信号,保障航空机队的飞行安全。
-
公开(公告)号:CN116152267A
公开(公告)日:2023-05-23
申请号:CN202310448684.0
申请日:2023-04-24
Applicant: 中国民用航空飞行学院
IPC: G06T7/10 , G06V10/764 , G06V10/80
Abstract: 本发明涉及基于对比性语言图像预训练技术的点云实例分割方法,包括步骤:获取点云数据,进行预处理后,得到文本信息、点云训练数据集;构建跨模态预训练模型,跨模态预训练模型包括稀疏卷积神经网络、预训练编码网络、预测网络;将点云训练数据集输入稀疏卷积神经网络,得到体素级别的点云特征;将文本信息与体素级别的点云特征进行融合,得到融合点云特征;对融合点云特征进行线性投影得到实例掩码特征,对文本信息提取出文本特征,将融合点云特征、实例掩码特征、文本特征输入预训练编码网络,得到查询的向量值;将查询的向量值输入预测网络,得到分割的实例结果。本发明在将融合点云特征和文本特征整合在一起,能够更好地捕获这两类信息。
-
-
-
-
-
-
-
-
-