公开(公告)号：CN119251626A

公开(公告)日：2025-01-03

申请号：CN202411161452.8

申请日：2024-08-22

Applicant: 杭州高新区(滨江)区块链与数据安全研究院 ,  浙江大学

Inventor： 宋杰 ,  谢玥辰 ,  宋明黎 ,  冯尊磊 ,  罗进开

IPC: G06V10/776 ,  G06V10/774

Abstract: 本申请涉及一种模型验证方法、装置、计算机设备和存储介质，方法包括：获取生成模型基于第一噪声和第一文本生成的第一合成图，以及生成模型基于第二噪声和第二文本生成的第二合成图；根据第一模型对第一合成图的预测结果和第一噪声，得到第一目标噪声，并根据第二模型对第二合成图的预测结果和第二噪声，得到第二目标噪声；获取生成模型基于第一目标噪声和第一文本生成的第三合成图，以及基于第二目标噪声和第二文本生成的第四合成图；通过比较第一模型对第三合成图的预测结果和第二模型对第四合成图的预测结果，判断第一模型是否对生成模型进行知识窃取，采用本方法能够准确验证第一模型是否对生成模型的合成图数据集进行知识窃取。

公开(公告)号：CN119130652A

公开(公告)日：2024-12-13

申请号：CN202411578463.6

申请日：2024-11-07

Applicant: 浙江大学 ,  杭州高新区(滨江)区块链与数据安全研究院

Inventor： 宋杰 ,  贺达 ,  宋明黎 ,  郑铜亚 ,  庄永真 ,  赵李君

IPC: G06Q40/04 ,  G06Q20/36 ,  G06F18/214 ,  G06F18/2433 ,  G06F18/10 ,  G06F17/18 ,  G06N3/042 ,  G06N3/08

Abstract: 基于自适应异配消息聚合的虚拟币钱包地址异常检测方法与系统，其方法包括：首先，对初始交易数据进行处理，得到节点的特征并进行数据归一化，然后将原始数据转换成原始交易图，对原始交易图随机游走采样得到模型的训练图数据，采用自适应异配性聚合的图神经网络算子进行节点之间的信息传递，得到节点的嵌入向量；将得到的节点的嵌入向量作为预测模型的输入；采用多个线性层构建节点预测模型，对于节点类别概率分数的预测和节点异配性的计算，进行随机梯度下降优化参数；最后通过训练得到虚拟币钱包地址异常检测模型，用该模型对虚拟币交易网络中的异常钱包地址进行检测。本发明能够准确识别虚拟币交易网络中存在非法交易的钱包地址。

公开(公告)号：CN114330554B

公开(公告)日：2025-04-08

申请号：CN202111639661.5

申请日：2021-12-29

Applicant: 浙江大学

Inventor： 宋明黎 ,  谢东霖 ,  余若男 ,  方共凡 ,  宋杰 ,  冯尊磊 ,  高艺 ,  董玮

IPC: G06V40/10 ,  G06V10/774 ,  G06V10/82 ,  G06N3/045 ,  G06N3/042 ,  G06N3/096 ,  G06N3/098

Abstract: 一种面向智能安防的视觉深度模型知识重组方法，首先，收集安防边缘测的视觉数据，明确模型任务，收集数据进行标注，训练目标任务模型。然后，利用归因图计算目标模型和不同预训练模型之间的可迁移分数，将归一化的可迁移分数作为模型选择的概率，可放回地采样形成模型集合；在联邦学习范式的基础上，将目标模型分发到不同的节点，利用表征蒸馏迁移预训练模型的特征提取能力，在目标模型学习和迁移完成后，通过平均的方式在中心节点进行知识重组，重组过后的模型再次分发到选择的模型节点进一步迭代。最后，再利用目标数据集进行微调目标模型，从而学习得到一个在智能安防领域的目标任务上表现良好的视觉深度模型，并且保护了数据隐私和模型隐私。

公开(公告)号：CN118155661A

公开(公告)日：2024-06-07

申请号：CN202410265676.7

申请日：2024-03-08

Applicant: 浙江大学宁波“五位一体”校区教育发展中心

Inventor： 王慧琼 ,  孙立 ,  宋明黎 ,  宋杰 ,  冯尊磊

IPC: G10L25/51 ,  G10L15/08 ,  G10L15/26 ,  G10L19/18 ,  H04L9/40 ,  H04L9/32 ,  G06F18/25 ,  G06V10/80 ,  G06V10/82 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/09 ,  G06Q50/50

Abstract: 一种基于多模态融合深度神经网络模型电信反欺诈方法和系统，其方法包括：步骤1.将信息中的语音模态转换为文字模态；步骤2.将信息中的图像进行切片并转换为图像数字向量；步骤3.将信息中的文本转换为数字向量；步骤4.文本图像信息融合向量生成；步骤5.多层联合向量的深度学习网络迭代训练；步骤6.欺诈识别预测；待预测是否为欺诈的样本输入到已经训练好的分类器模型中，利用最后一层迭代后的输出向量，经过双曲正切函数进行映射，完成欺诈预测时的是否违规的判断。

公开(公告)号：CN116881716A

公开(公告)日：2023-10-13

申请号：CN202310851553.7

申请日：2023-07-12

Applicant: 浙江大学

Inventor： 宋杰 ,  许可 ,  郑铜亚 ,  冯尊磊 ,  宋明黎

IPC: G06F18/214 ,  G06F18/241 ,  G06N3/0464 ,  G06N3/0442 ,  G06N3/09 ,  G06F17/16 ,  G06F17/11

Abstract: 基于时序二分图神经网络的用户缺失属性补全方法，首先，对时序用户属性矩阵进行预处理，进行数据归一化，并记录分类变量和连续变量。然后将时序用户属性矩转化为时序二分图结构，并采用图卷积神经网络来聚合提取图中节点嵌入向量和边嵌入向量，并使用LSTM融合不同时间步的节点特征；将时序二分图中预测边的两端节点的图特征拼接作为用户节点‑属性节点的边预测模型的输入；采用多个线性层构建边预测模型，引入多任务学习框架同时学习分类任务和回归任务，从而灵活处理分类变量和连续变量。最后，通过该框架来对用户缺失属性进行补全，并将结果写回原数据中。本发明还包括基于时序二分图神经网络的用户缺失属性补全方法的系统。

公开(公告)号：CN116796699A

公开(公告)日：2023-09-22

申请号：CN202310841499.8

申请日：2023-07-11

Applicant: 浙江大学 ,  国网山东省电力公司济南供电公司

Inventor： 冯尊磊 ,  魏耀全 ,  陈霞 ,  宋杰 ,  宋明黎 ,  梁栋 ,  禚俊杰 ,  刘珅岐

IPC: G06F30/398 ,  G06N3/088 ,  G06N3/0895 ,  G06N3/092 ,  G06N3/045

Abstract: 基于状态关系主动提问的存储电路智能化设计方法和系统，其方法包括：首先将存储电路数据的节点特征进行对齐从而构建存储电路结构状态的一条高维向量表示。然后利用随机采样的存储电路结构数据训练特征提取器，之后构建强化学习模型。在训练强化学习模型时，将每一步遇到的存储电路结构状态特征提取出来，并放入特征池中。然后依据每一步当前存储电路结构状态特征与特征池的距离，判断是否向专家进行提问。若向专家提问，专家会给予具体动作建议让模型去执行。最后，为了保证模型能够快速学习专家知识，为每一条专家建议的样本设置额外的内置奖励。

公开(公告)号：CN115761453A

公开(公告)日：2023-03-07

申请号：CN202211285599.9

申请日：2022-10-20

Applicant: 浙江大学

Inventor： 宋明黎 ,  申成吉 ,  黄启涵 ,  张皓飞 ,  宋杰

IPC: G06V20/00 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08 ,  G06N5/04

Abstract: 一种面向电力巡检场景的基于特征匹配的轻量化单样本目标检测方法，包括下列步骤：1)基于掩码的基类别目标检测模型训练；2)新类别标注样本的数据增强；3)新类别标注样本的特征提取；4)模型在测试数据上的初步推理；5)使用传统特征修正推理结果。通过上述步骤，本发明实现了在每个类别标注样本极其稀少情况下(1个)的目标检测，并克服了传统单样本目标检测中依赖于测试图像类别先验知识的问题，同时还使用神经架构搜索，在尽量保持模型性能的同时减少模型的参数量。

公开(公告)号：CN115731433A

公开(公告)日：2023-03-03

申请号：CN202211503704.1

申请日：2022-11-28

Applicant: 之江实验室 ,  浙江大学

Inventor： 宋杰 ,  张天立 ,  王玉柱 ,  潘淑

IPC: G06V10/774 ,  G06V10/764 ,  G06V10/82 ,  G06N3/04 ,  G06N3/08

Abstract: 一种基于模型权重混合的在线知识蒸馏方法及系统，包括：1)服务端收集标注数据，划分为训练集和验证集；2)选取N个相同架构的学生模型，并通过线性加权学生参数构建权重混合模型；3)选取数据增强将训练集扩充成N+1份，分别输入N个学生和权重混合模型中，得到N+1个预测输出以及他们的平均集成预测；4)计算每个学生和权重混合模型的分类损失；5)计算每个学生输出与集成预测之间的知识蒸馏损失；6)计算每个学生的参数优化目标并更新N个学生的参数；7)重复3‑6步骤，每个轮次后根据更新后的学生重新构建混合权重模型，并每隔固定轮次Δ，将混合权重模型的参数融合到学生中；8)选取验证集上表现最优的模型部署到终端设备上。

公开(公告)号：CN110097084B

公开(公告)日：2021-08-31

申请号：CN201910264911.8

申请日：2019-04-03

Applicant: 浙江大学

Inventor： 宋明黎 ,  沈成超 ,  宋杰 ,  孙立 ,  尹艳玲

IPC: G06K9/62 ,  G06N3/04 ,  G06N3/08

Abstract: 通过投射特征训练多任务学生网络的知识融合方法，由以下步骤组成：首先初始化TargetNet(目标学生网络)的结构与教师网络相同，通过通道编码，将TargetNet中融合的特征图投射为对应任务的特征图；逐个训练TargetNet中与教师网络对应的block，得到融合的特征图；确定TargetNet中不同任务开始分支的各自位置；将教师网络中的对应block加入学生网络，作为不同任务的分支，并移除TargetNet中末端的block，得到TargetNet最终结构；最后调优学生网络。本方法能够使用无标签数据集，融合多个不同任务的教师网络，得到性能优越的轻量级学生网络。

公开(公告)号：CN111160124A

公开(公告)日：2020-05-15

申请号：CN201911265084.0

申请日：2019-12-11

Applicant: 浙江大学

Inventor： 宋明黎 ,  沈成超 ,  薛梦琦 ,  宋杰 ,  孙立

IPC: G06K9/00 ,  G06K9/62

Abstract: 一种基于知识重组的深度模型定制方法，包括：1)收集已有训练好的深度人脸属性识别模型，构建人脸属性识别模型库，将各类模型进行分组归类；2)根据当前对人脸属性识别的任务需求，将目标任务分解为一系列识别不同人脸属性的“组件任务”，并从深度模型库中选择相关的模型；3)对选中的人脸属性识别模型，进行知识过滤，将多个深度模型中，与“组件任务”相关的知识合并到“组件网络”中；4)对“组件网络”进行组合，得到最终的“目标网络”。本发明利用现有深度模型的知识，逐过程指导新模型的学习，有效减少对数据标注、数据量的依赖，降低训练新深度模型耗费的周期和资源。