-
公开(公告)号:CN118133883B
公开(公告)日:2024-08-27
申请号:CN202410552789.5
申请日:2024-05-06
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06N3/042 , G06N3/0464 , G06N3/048 , G06N3/08 , G06N5/022
Abstract: 本申请公开一种图采样方法、图谱预测方法及存储介质,涉及数据处理技术领域,用于从图谱中采集到具有代表性的采样点,使得基于采样点对图神经网络进行训练时得到更好的训练结果。该方法包括:对于图谱中的每一个节点,确定节点的出度值,以及节点的属性信息,出度值用于表征图谱中以节点为起点的边的数量;基于节点的出度值以及节点的属性信息,确定概率密度函数;基于概率密度函数,对图谱进行采样,得到子图,子图用于对图神经网络进行训练。
-
公开(公告)号:CN115906933A
公开(公告)日:2023-04-04
申请号:CN202211213118.3
申请日:2022-09-29
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06N3/0464 , G06N3/08 , G06F18/214
Abstract: 本申请实施例提供了一种联邦学习方法、装置及电子设备。其中,所述方法,包括:获取多个客户端各自训练待训练模型得到的模型参数,作为候选模型参数;在以模型参数中各参数的取值为维度的模型参数空间中,分别确定各所述候选模型参数的邻域内所述候选模型参数的密度,作为所述候选模型参数对应的局部可达密度;根据各所述候选模型参数对应的所述局部可达密度,对各所述候选模型参数进行加权聚合,得到更新后模型参数;将所述待训练模型的模型参数更新为所述更新后模型参数,得到训练后模型。可以降低模型投毒攻击对联邦学习训练得到的模型的影响,提高训练得到的模型的性能。
-
公开(公告)号:CN112817706A
公开(公告)日:2021-05-18
申请号:CN201911121382.2
申请日:2019-11-15
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请实施例提供了一种分布式任务调度系统及方法。方案包括:资源管理模块获取多源大数据计算环境的集群信息,创建大数据计算环境的资源管理器队列对应的资源池;模型管理模块获取待执行任务的代码包;任务管理模块基于代码包生成预设任务类型的待执行任务,向资源管理模块申请目标资源池中的目标资源,在资源申请成功后,将待执行任务调度到任务执行引擎;任务执行引擎将待执行任务发送至目标资源池对应的大数据计算环境的资源管理器队列。应用本申请实施例提供的技术方案,实现了多源大数据计算环境的资源统一管理,以及实现了多种类型任务的管理和调度,降低了大数据计算环境中业务运维成本,降低了业务代码包管理和上线的复杂度。
-
公开(公告)号:CN119544695A
公开(公告)日:2025-02-28
申请号:CN202311094452.6
申请日:2023-08-28
Applicant: 杭州海康威视数字技术股份有限公司
IPC: H04L67/06 , H04L67/10 , H04L69/04 , G06N3/0495 , G06N3/098
Abstract: 本发明公开了一种联邦学习通信方法、系统及设备,其中方法包括:在横向联邦学习的任意一轮联邦聚合过程中,接收参与当前轮次联邦聚合的各个第一客户端发送的量化模型参数和反量化器;采用目标客户端对应的反量化器反量化目标客户端对应的量化模型参数,得到还原模型参数;在得到各个第一客户端分别对应的还原模型参数后,对各个第一客户端的还原模型参数进行聚合得到聚合模型参数,将聚合模型参数反馈给各个第一客户端,本发明提供了一种横向联邦学习过程中服务端与客户端之间的通信方案,以提高联邦学习通信效率。
-
公开(公告)号:CN111831424B
公开(公告)日:2023-09-05
申请号:CN201910307313.4
申请日:2019-04-17
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明实施例提供了一种任务处理方法、系统及装置,方法包括:获取有向无环图,根据有向无环图,确定当前待执行任务、目标处理单元、目标资源及目标算法包的信息;根据目标算法包的信息,获取目标算法包,并将目标算法包发送至目标处理单元,利用目标处理单元中的目标资源对目标算法包进行处理;可见,本方案中,有向无环图中包括每个任务对应的处理单元的信息、每个任务在其对应的处理单元中申请的资源的信息,也就是说,可以根据实际需求设定处理单元与任务之间的对应关系,同一个有向无环图中的任务可以由不同的处理单元执行,提高了方案的灵活性。
-
公开(公告)号:CN110471614B
公开(公告)日:2023-07-14
申请号:CN201810439642.X
申请日:2018-05-09
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请是关于一种存储数据的方法、检测终端的方法及装置,属于通信领域。所述方法包括:获取最近N天内被探测出的各终端的第一轨迹数据,终端的第一轨迹数据至少包括所述终端的第一地址、探测所述终端的各探测设备的第二地址和所述各探测设备探测出所述终端的第一探测时间,N为大于或等于1的整数;对所述各终端的第一轨迹数据的格式进行转换,得到所述各终端的第二轨迹数据,终端的第二轨迹数据的数据量小于所述终端的第一轨迹数据的数据量;存储所述各终端的第二轨迹数据。所述装置包括:获取模块、转换模块和存储模块。本申请能够节省存储空间。
-
公开(公告)号:CN118261273A
公开(公告)日:2024-06-28
申请号:CN202211680880.2
申请日:2022-12-27
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06N20/20 , G06F18/214 , G06F18/25 , G06N3/04 , G06N3/098
Abstract: 本申请实施例提供了联邦网络模型的训练方法、任务预测方法、装置及设备,涉及机器学习技术领域。其中,一种联邦网络模型的训练方法,包括:获取多个特征提取子模型分别针对目标样本对象所提取的数据特征;将所获取的各个数据特征输入特征交互子模型,以使特征交互子模型利用所接收的数据特征,构建目标样本对象的多维数据特征,获取各个特征维度分别对应的权重信息,并利用所获取的权重信息,对目标样本对象的多维数据特征中的特征内容进行加权处理,得到融合特征;将融合特征输入结果预测子模型,得到目标样本对象的针对预定分析任务的预测结果;基于预测结果,对联邦网络模型进行训练。可见,本方案可以提高模型训练结果的准确性。
-
公开(公告)号:CN112817706B
公开(公告)日:2023-06-02
申请号:CN201911121382.2
申请日:2019-11-15
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本申请实施例提供了一种分布式任务调度系统及方法。方案包括:资源管理模块获取多源大数据计算环境的集群信息,创建大数据计算环境的资源管理器队列对应的资源池;模型管理模块获取待执行任务的代码包;任务管理模块基于代码包生成预设任务类型的待执行任务,向资源管理模块申请目标资源池中的目标资源,在资源申请成功后,将待执行任务调度到任务执行引擎;任务执行引擎将待执行任务发送至目标资源池对应的大数据计算环境的资源管理器队列。应用本申请实施例提供的技术方案,实现了多源大数据计算环境的资源统一管理,以及实现了多种类型任务的管理和调度,降低了大数据计算环境中业务运维成本,降低了业务代码包管理和上线的复杂度。
-
公开(公告)号:CN111831424A
公开(公告)日:2020-10-27
申请号:CN201910307313.4
申请日:2019-04-17
Applicant: 杭州海康威视数字技术股份有限公司
Abstract: 本发明实施例提供了一种任务处理方法、系统及装置,方法包括:获取有向无环图,根据有向无环图,确定当前待执行任务、目标处理单元、目标资源及目标算法包的信息;根据目标算法包的信息,获取目标算法包,并将目标算法包发送至目标处理单元,利用目标处理单元中的目标资源对目标算法包进行处理;可见,本方案中,有向无环图中包括每个任务对应的处理单元的信息、每个任务在其对应的处理单元中申请的资源的信息,也就是说,可以根据实际需求设定处理单元与任务之间的对应关系,同一个有向无环图中的任务可以由不同的处理单元执行,提高了方案的灵活性。
-
公开(公告)号:CN118278637A
公开(公告)日:2024-07-02
申请号:CN202211723386.X
申请日:2022-12-30
Applicant: 杭州海康威视数字技术股份有限公司
IPC: G06Q10/0631 , G06Q30/0601
Abstract: 本申请实施例提供了一种排程确定方法、装置及电子设备。方法包括:获取候选排程结果中各订单的候选排程交期和各订单的目标交期;根据目标交期和候选排程交期确定各订单的效应值,作为候选排程交期对应的效应值,其中,当目标交期小于候选排程交期时,效应值与候选排程交期负相关,当目标交期大于候选排程交期时,效应值与候选排程交期正相关;直至满足预设循环结束条件,根据各订单的效应值调整候选排程结果,得到新的候选排程结果,并返回执行根据目标交期和候选排程交期确定各订单的效应值,作为候选排程交期对应的效应值的步骤;将对应的效应值满足第一预设条件的新的候选排程结果作为各订单的目标排程结果。可以确定更合理的排程计划。
-
-
-
-
-
-
-
-
-