公开(公告)号：CN116310984B

公开(公告)日：2024-01-30

申请号：CN202310263781.2

申请日：2023-03-13

Applicant: 中国科学院微电子研究所

Inventor： 张宝斌 ,  高兴宇 ,  卫建泽 ,  潘博诚

IPC: G06V20/40 ,  H04N21/488 ,  G06V10/771 ,  G06V10/82 ,  G06F40/258 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/047

Abstract: 本发明涉及一种基于Token采样的多模态视频字幕生成方法，属于人工智能技术领域，解决了现有技术中延迟过高，计算速率慢的问题。具体包括：对视频中各帧图像进行CNN卷积处理得到处理后的各图像；获取各图像的多个一维图片向量，将每个一维图片向量作为一个Token；将所有Token输入到Transformer中，利用Transformer中的多个Encoder块对Token提取高级语义特征，在特征提取过程中对Token进行剪枝；将最后一个Encoder块输出的特征输入至Transformer中的Decode中进行解码，得到视频中各帧图像对应的文本信息。实现了降低计算开销的目的。(56)对比文件Sehoon Kim 等.Learned Token Pruningfor Transformers《.https://arxiv.org/pdf/2107.00910.pdf》.2022,全文.

公开(公告)号：CN119295810A

公开(公告)日：2025-01-10

申请号：CN202411330049.3

申请日：2024-09-24

Applicant: 中国科学院微电子研究所

Inventor： 高兴宇 ,  石海龙 ,  张宝斌

IPC: G06V10/764 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/084 ,  G06N3/049

Abstract: 本发明涉及一种基于分层竞争脉冲神经网络的图像分类方法及系统，属于图像分类领域，解决了图像分类时识别准确率低的问题，包括:将预处理后的图像数据输入训练好的SNN网络，得到图像的预测分类标签；其中，对所述SNN网络引入竞争策略，包括：对输入图像数据不同位置的特征图进行排序，实现对特征图的激励或抑制；以及基于敏感度对不同的脉冲神经元进行排序，实现对脉冲神经元的激励或抑制；对所述SNN网络的训练包括：对网络中的各个卷积核分配权重、对各个神经元分配权重；计算得到训练的损失值；进行反向传播，计算得到各个卷积核的权重、各个神经元的权重、激励系数和抑制系数。增强脉冲神经网络的特征表达能力及提高图像识别的准确率。

公开(公告)号：CN116310984A

公开(公告)日：2023-06-23

申请号：CN202310263781.2

申请日：2023-03-13

Applicant: 中国科学院微电子研究所

Inventor： 张宝斌 ,  高兴宇 ,  卫建泽 ,  潘博诚

IPC: G06V20/40 ,  H04N21/488 ,  G06V10/771 ,  G06V10/82 ,  G06F40/258 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/047

Abstract: 本发明涉及一种基于Token采样的多模态视频字幕生成方法，属于人工智能技术领域，解决了现有技术中延迟过高，计算速率慢的问题。具体包括：对视频中各帧图像进行CNN卷积处理得到处理后的各图像；获取各图像的多个一维图片向量，将每个一维图片向量作为一个Token；将所有Token输入到Transformer中，利用Transformer中的多个Encoder块对Token提取高级语义特征，在特征提取过程中对Token进行剪枝；将最后一个Encoder块输出的特征输入至Transformer中的Decode中进行解码，得到视频中各帧图像对应的文本信息。实现了降低计算开销的目的。

公开(公告)号：CN115499320A

公开(公告)日：2022-12-20

申请号：CN202211007110.1

申请日：2022-08-22

Applicant: 中国南方电网有限责任公司超高压输电公司 ,  中国科学院微电子研究所

Inventor： 张烜 ,  高兴宇 ,  卢金奇 ,  冯万进 ,  张宝斌 ,  李林城 ,  陈强

IPC: H04L41/14 ,  H04L43/045 ,  H04L9/40

Abstract: 本发明公开了一种网络空间资产的监控系统，资产分析模块用于对资产数据进行分析，得到资产分析结果；所述流量分析模块用于对流量数据进行分析，得到流量分析结果；所述性能分析模块用于对网络性能数据和业务性能数据进行同属性分析，得到网络性能与业务性能的性能关联分析结果；所述安全分析模块用于对网络安全数据进行分析，得到安全分析结果；所述综合态势感知模块，用于对所述资产数据、所述流量数据、所述网络性能数据和所述网络安全数据进行综合分析，得到综合分析结果。本发明公开的网络空间资产的监控系统，能够使分析结果更直观的呈现，提高网络运维人员对分析结果的处理效率，进而可以快速且准确获取到网络空间资产的网络状况。

公开(公告)号：CN115499166A

公开(公告)日：2022-12-20

申请号：CN202211007510.2

申请日：2022-08-22

Applicant: 中国南方电网有限责任公司超高压输电公司 ,  中国科学院微电子研究所

Inventor： 卢金奇 ,  高兴宇 ,  黄宇 ,  张宝斌 ,  冯万进 ,  曾嘉伟 ,  钱方

IPC: H04L9/40

Abstract: 本申请的实施例提供了一种网络空间防护系统。该系统包括：AI智能诊断模块，用于获取目标网络的运行状态并确定所述目标网络的数据变化信息，以从若干网络事件中，确定疑似威胁网络事件；异常值检测模块，用于对所述疑似威胁网络事件进行特征提取，得到对应的特征信息；网络安全杀伤链技术分析模块，用于根据所述特征信息，确定所述疑似威胁网络事件对应的异常类型和攻击阶段；未知威胁检测模块，用于根据所述特征信息，确定所述疑似威胁网络事件对应的威胁源，并根据所述威胁源，确定可能被攻击的风险设备。本申请实施例的技术方案可以对网络攻击事件进行主动防护，提高网络的安全性。

公开(公告)号：CN115499166B

公开(公告)日：2024-07-30

申请号：CN202211007510.2

申请日：2022-08-22

Applicant: 中国南方电网有限责任公司超高压输电公司 ,  中国科学院微电子研究所

Inventor： 卢金奇 ,  高兴宇 ,  黄宇 ,  张宝斌 ,  冯万进 ,  曾嘉伟 ,  钱方

IPC: H04L9/40

Abstract: 本申请的实施例提供了一种网络空间防护系统。该系统包括：AI智能诊断模块，用于获取目标网络的运行状态并确定所述目标网络的数据变化信息，以从若干网络事件中，确定疑似威胁网络事件；异常值检测模块，用于对所述疑似威胁网络事件进行特征提取，得到对应的特征信息；网络安全杀伤链技术分析模块，用于根据所述特征信息，确定所述疑似威胁网络事件对应的异常类型和攻击阶段；未知威胁检测模块，用于根据所述特征信息，确定所述疑似威胁网络事件对应的威胁源，并根据所述威胁源，确定可能被攻击的风险设备。本申请实施例的技术方案可以对网络攻击事件进行主动防护，提高网络的安全性。