数据分片方法、装置、电子设备和存储介质

    公开(公告)号:CN115221155A

    公开(公告)日:2022-10-21

    申请号:CN202110410435.3

    申请日:2021-04-16

    Inventor: 杨猛 肖昕璐 宋蕾

    Abstract: 本申请公开了一种数据分片方法、装置、电子设备和存储介质。该方法包括:获取初始哈希环上的多个待存储数据;对各待存储数据进行聚类,得到各待存储数据的目标聚类结果;对于每个目标聚类结果,计算目标聚类结果中各特征向量的均值;针对各目标聚类结果,基于均值,以及目标聚类结果的预设权重,确定各待存储数据的资源占用指标;基于各待存储数据的资源占用指标,更新初始哈希环上各待存储数据的存储位置。采用本申请的数据分片方法,可实现将数据均衡的分配到每个数据存储节点,保证每个数据存储节点的系统资源相对均衡,解决传统算法在数据分片过程中数据移动量过大、评估维度单一造成数据倾斜的问题,从而提升数据分片效率及系统性能。

    特征选择方法、装置、设备和介质

    公开(公告)号:CN112651416A

    公开(公告)日:2021-04-13

    申请号:CN201910962985.9

    申请日:2019-10-11

    Abstract: 本发明公开了特征选择方法、装置、设备和介质。该方法包括:获取原始特征集的当前待寻优特征子集;将原始特征集的候选特征子集中的第一特征加入当前待寻优特征子集,得到第一特征子集;从第一特征子集中剔除第二特征,得到第二特征子集;若第二特征子集不优于当前待寻优特征子集,将第一特征子集作为下一待寻优特征子集,直至第一特征子集满足预设停止准则,将第一特征子集选定为原始特征集的最优特征子集。根据本发明实施例提供的特征选择方法、装置、设备和介质,可以提高特征选择的精确度。

    物品识别的方法、装置、设备、存储介质及程序产品

    公开(公告)号:CN119445305A

    公开(公告)日:2025-02-14

    申请号:CN202411509066.3

    申请日:2024-10-25

    Inventor: 权雪菲 史远 杨猛

    Abstract: 本申请公开了一种物品识别的方法、装置、设备、存储介质及程序产品,该方法应用于终端,具体技术方案包括:获取安检设备采集的待处理图像;对待处理图像进行第一处理,或者第二处理;其中,第一处理是指终端提取待处理图像的物品特征数据;对比安全品特征数据集合和物品特征数据,确定待处理图像中的目标内容图像;向服务器发送包含目标内容图像的物品识别请求;第二处理是指终端将待处理图像作为目标内容图像,向服务器发送包含目标内容图像的物品识别请求;接收服务器对目标内容图像进行图像识别得到的物品识别结果。如此,通过服务器对待处理图像进行识别,可以提高识别结果的准确性。

    数据存储方案确定方法、装置、设备以及存储介质

    公开(公告)号:CN118820226A

    公开(公告)日:2024-10-22

    申请号:CN202311678640.3

    申请日:2023-12-07

    Inventor: 杨猛

    Abstract: 本申请实施例提供了一种数据存储方案确定方法、装置、设备以及存储介质。通过基于预设初始数据量,按照预设的正整数倍数λ,确定待测试的多种存储数据量;计算每种存储数据量对应的数据写入效率、单体查询效率、聚合统计效率以及关联查询效率;基于数据写入效率、单体查询效率、聚合统计效率以及关联查询效率中每种效率对应的均值、标准差确定每种存储数据量中每个效率的离散偏离度;基于每种存储数据量中每个效率的离散偏离度,确定目标存储方案,根据本申请实施例的能够确保数据存储和数据获取的效率。

    一种多方联合建模方法、装置、设备及存储介质

    公开(公告)号:CN118798380A

    公开(公告)日:2024-10-18

    申请号:CN202311523619.6

    申请日:2023-11-15

    Inventor: 杨猛

    Abstract: 本申请公开了一种多方联合建模方法、装置、设备及存储介质,应用于联邦学习领域。多方联合建模方法包括:接收参与联合建模的多个第一参与方分别发送的第一模型参数;对多个第一模型参数进行聚合,得到第一聚合模型参数;将第一聚合模型参数分发至联合建模的所有参与方,以使所有参与方中的每个参与方基于自身的训练数据进行模型训练,得到第二模型参数;在接收到多个第二参与方发送的第二模型参数的情况下,对多个第二参与方发送的第二模型参数进行聚合,得到第二聚合模型参数,多个第二参与方中的每个参与方满足预设筛选条件;更新迭代次数;在更新后的迭代次数达到预设次数的情况下,基于第二聚合模型参数确定目标模型。能够提高建模效率。

Patent Agency Ranking