-
公开(公告)号:CN119378564A
公开(公告)日:2025-01-28
申请号:CN202411949511.8
申请日:2024-12-27
Applicant: 数据堂(北京)科技股份有限公司
IPC: G06F40/30 , G06F40/126 , G06F40/216
Abstract: 本申请涉及数据标注技术领域,其具体地公开了一种大模型数据智能标注方法及系统,其采用基于深度学习的自然语言处理技术对未标注文本数据集中的各个未标注文本数据进行置信度评估,选择最小置信度对应的文本数据作为代表样本数据,并对所述代表样本数据进行语料扩充,进而,通过对所述代表样本数据和语料扩充后的代表样本数据进行语义特征提取和补偿式交互融合,以充分利用两者之间的共有信息和独特信息,从而实现对所述代表样本数据的全面语义理解和智能标注。通过这种方式,可以显著提高数据标注的效率和准确性,同时大幅度减少人工干预的需求,降低标注成本。
-
公开(公告)号:CN119316229A
公开(公告)日:2025-01-14
申请号:CN202411845229.5
申请日:2024-12-16
Applicant: 北京市大数据中心 , 数据堂(北京)科技股份有限公司
IPC: H04L9/40
Abstract: 本发明涉及数据共享技术领域,且公开了一种基于前置节点的联邦数据共享方法和装置,其中方法包括:前置节点将获取到的联邦数据上传至私有链,前置节点上传本地区的基础公共服务信息到私有链,前置节点计算联邦数据特征,并上链请求验证,其他节点根据本地区实际情况,反馈验证值或对联邦数据进行修正,监管机构定期对整个链上的节点进行性能监管和数据统计分析,本发明通过在前置节点上进行数据预处理和加密,确保了数据在传输过程中的安全性和隐私性,前置节点作为中介,可以优化数据传输流程,提高处理效率,减轻链上节点的负载。
-
公开(公告)号:CN117714217B
公开(公告)日:2024-05-28
申请号:CN202410167961.5
申请日:2024-02-06
Applicant: 河北数云堂智能科技有限公司 , 数据堂(北京)科技股份有限公司
IPC: H04L9/40 , H04L67/104
Abstract: 本发明涉及电数字数据处理的领域,尤其是涉及一种可信联邦智能安全计算平台的方法和装置,方法包括如下步骤:参数服务器和节点通过公网连接,节点之间无连接,同时参数服务器和节点通过私链连接。参数服务器将初始参数和模型结构向节点发送;节点使用本地数据训练模型,获得参数和训练日志;节点将训练日志写入私链,将本地参数发送参数服务器;参数服务器将本地参数与之前汇聚后保存的参数进行聚合,获得聚合参数并向节点发送,将汇聚日志写入私链;节点直接与参数服务器交换参数,不等待其它节点。循环达预设次数或训练模型达到稳定后停止。本发明具有降低联邦学习中存在的泄密风险,提升联邦学习的安全性的效果。
-
公开(公告)号:CN118071994A
公开(公告)日:2024-05-24
申请号:CN202410213038.0
申请日:2024-02-27
Applicant: 数据堂(北京)科技股份有限公司 , 河北数云堂智能科技有限公司
IPC: G06V10/25 , G06V20/70 , G06V20/64 , G06V10/762
Abstract: 本发明提供了自动驾驶场景下不完整点云数据标注方法、装置及终端,属于点云数据标注技术领域,本方法包括利用启动标注模块在点云数据内进行范围框选,形成启动三维矩形框;对启动三维矩形框的点云进行过滤,然后再进行聚类,形成多个簇,选取待标注目标簇,然后利用预设规则生成外接三维矩形框;计算凸包边界,自动矫正外接三维矩形框,使之与目标朝向保持一致,构建最小矩形框;推理最小矩形框的生长方向,确定生长距离,以此自动补全最小矩形框,形成完整的待标注目标矩形框。本发明能够帮助标注人员快速准确完成不完整目标的完整目标框自动标注,提高工作效率。本发明可以适应多种不同类型的目标。
-
公开(公告)号:CN115617955B
公开(公告)日:2023-03-21
申请号:CN202211602620.3
申请日:2022-12-14
Applicant: 数据堂(北京)科技股份有限公司 , 河北数云堂智能科技有限公司
IPC: G06F16/33 , G06F16/35 , G06F40/279 , G06F40/30 , G06F18/214 , G06F18/25 , G06N3/0442 , G06N3/0464 , G06N3/092
Abstract: 本发明涉及一种分级预测模型训练方法、标点符号恢复方法及装置,所述训练方法包括如下步骤:提取样本文本的样本词语集合,以及提取样本语音的样本音频特征;将所述样本词语集合、所述样本音频特征进行多模态特征融合,获得乘积量化特征;提取所述样本词语集合的样本语义特征,将所述样本语义特征与所述乘积量化特征分别输入低频标点符号预测模型、高频标点符号预测模型。本标点符号分级预测模型训练方法通过低频标点符号预测模型、高频标点符号预测模型进行训练,从而获得最优低频预测模型以及最优高频预测模型,利用两种不同的预测模型对文本的标点符号进行分级预测,可以扩大标点符号识别范围,提高文本标点符号的准确率。
-
公开(公告)号:CN115617955A
公开(公告)日:2023-01-17
申请号:CN202211602620.3
申请日:2022-12-14
Applicant: 数据堂(北京)科技股份有限公司 , 河北数云堂智能科技有限公司
IPC: G06F16/33 , G06F16/35 , G06F40/279 , G06F40/30 , G06F18/214 , G06F18/25 , G06N3/0442 , G06N3/0464 , G06N3/092
Abstract: 本发明涉及一种分级预测模型训练方法、标点符号恢复方法及装置,所述训练方法包括如下步骤:提取样本文本的样本词语集合,以及提取样本语音的样本音频特征;将所述样本词语集合、所述样本音频特征进行多模态特征融合,获得乘积量化特征;提取所述样本词语集合的样本语义特征,将所述样本语义特征与所述乘积量化特征分别输入低频标点符号预测模型、高频标点符号预测模型。本标点符号分级预测模型训练方法通过低频标点符号预测模型、高频标点符号预测模型进行训练,从而获得最优低频预测模型以及最优高频预测模型,利用两种不同的预测模型对文本的标点符号进行分级预测,可以扩大标点符号识别范围,提高文本标点符号的准确率。
-
公开(公告)号:CN110580917B
公开(公告)日:2022-02-15
申请号:CN201910870667.X
申请日:2019-09-16
Applicant: 数据堂(北京)科技股份有限公司
Abstract: 本发明提供一种语音数据质量检测方法、装置、服务器及存储介质,以帧为单位对待进行质量检测的语音数据进行分割得到至少一个语音帧,计算语音帧在预先设置的至少一个频段中每个频段的频谱能量值,并将利用至少一个语音帧中每个语音帧在频段的频谱能量值计算语音数据在频段的目标频谱能量值,分析语音数据在各个频段的目标频谱能量值得到语音数据的质量检测结果。本发明提供的技术方案通过对语音数据在不同频段的目标频谱能量值的计算可分析出语音数据的语音质量检测结果,实现了对语音数据质量的检测。
-
公开(公告)号:CN113205163A
公开(公告)日:2021-08-03
申请号:CN202110764998.2
申请日:2021-07-07
Applicant: 数据堂(北京)科技股份有限公司
Abstract: 本发明公开了一种数据标注方法及装置,该方法包括:利用无监督学习算法进行冷启动,对原始的无标签数据进行初级分类,生成弱和伪标签数据信息;对伪标签数据信息进行校验标注;对预设数量的弱标签数据信息进行标注,获得部分已标注数据,基于弱监督学习算法和部分已标注数据,对剩余的弱标签数据信息进行预标注,生成预标注结果;对预标注结果进行半监督学习算法的样本筛选,获得精品数据集;对精品数据集进行数据补充,获得全标签数据集;利用全标签数据集对无监督学习算法、弱监督学习算法和半监督学习算法进行算法迭代,获得优化的无监督学习算法、弱监督学习算法和半监督学习算法。本发明可以大幅减少人工标注成本,并提高数据标注效率。
-
公开(公告)号:CN112530414A
公开(公告)日:2021-03-19
申请号:CN202110178948.6
申请日:2021-02-08
Applicant: 数据堂(北京)科技股份有限公司
Abstract: 本发明公开了一种迭代式大规模发音词典构建方法及装置,其中该方法包括:根据文本生数据生成词条序列;根据音频生数据生成音标序列;根据词条序列,利用G2P模型生成二元组 ;根据音标序列,利用P2G模型生成二元组 ;计算两个二元组之间的匹配度,并与预设匹配度进行比较,对匹配度小于预设匹配度对应的二元组 和二元组 进行鉴别性样本抽取,获得鉴别性样本;获取领域专家对鉴别性样本的标注和校正,将标注和校正后的二元组 和二元组 存入多层次大规模发音词典。本发明能够快速有效地构建大规模发音词典,提升语音识别系统的工作效率并降低人工成本。
-
公开(公告)号:CN107256513A
公开(公告)日:2017-10-17
申请号:CN201710465115.1
申请日:2017-06-19
Applicant: 数据堂(北京)科技股份有限公司
Inventor: 丰强泽
CPC classification number: G06Q30/0631 , G06Q30/0255
Abstract: 本发明公开一种对象的搭配推荐方法及装置,该方法及装置在获得目标用户的待搭配的当前对象后,基于预先制定并存储的用户搭配偏好表,确定与所述当前对象具有关联关系的至少一个候选对象,并利用预定筛选规则,从所述至少一个候选对象中筛选出与所述当前对象搭配的至少一个目标对象,最终,以预定展示方式向目标用户推荐与所述当前对象搭配的所述至少一个目标对象。可见,本发明实现了一种能够对对象进行搭配推荐的方案,针对网络商品推荐等场景,利用本发明方案可实现网络商品的搭配式推荐,从而可有效丰富网络商城的商品推荐功能,并提升用户体验。
-
-
-
-
-
-
-
-
-