公开(公告)号：CN119441805A

公开(公告)日：2025-02-14

申请号：CN202411481596.1

申请日：2024-10-23

Applicant: 之江实验室

Inventor： 戚耀 ,  廖龙飞 ,  富律文 ,  张胜 ,  薛贵荣 ,  陈红阳 ,  杨江 ,  宋子奇

IPC: G06F18/21 ,  G06F18/214 ,  G06N3/045 ,  G06N3/084 ,  G06V10/774 ,  G06V10/776 ,  G06V10/82

Abstract: 本发明提供一种训练数据有效性评估方法、系统及装置，所述方法包括：获取训练集，所述训练集为从待评估数据中均匀降采样所得；获取测试集，所述测试集包括至少1个基准测试集和至少1个关联测试集；用所述训练集训练一个探针模型；用所述测试集对所述探针模型进行测试，记录测试指标；根据所述测试指标作观测图，所述作观测图包括：以基准测试集测试指标为横轴、关联测试集测试指标为纵轴建立直角坐标系；根据所述测试指标在所述直角坐标系中画出关键点；根据所述观测图对待评估数据做出有效性评价。本发明的优点在于：可以用很低的算力，迅速给出数据有效性评估，能提高模型研发迭代效率，尤其是对前沿的复杂模型，增益更明显。