发明授权
- 专利标题: 商品短文本核心词提取方法和装置
-
申请号: CN201610191177.3申请日: 2016-03-30
-
公开(公告)号: CN105808526B公开(公告)日: 2019-07-30
- 发明人: 高维国 , 陈海勇
- 申请人: 北京京东尚科信息技术有限公司 , 北京京东世纪贸易有限公司
- 申请人地址: 北京市海淀区杏石口路65号西杉创意园西区11C楼东段1-4层西段1-4层
- 专利权人: 北京京东尚科信息技术有限公司,北京京东世纪贸易有限公司
- 当前专利权人: 北京京东尚科信息技术有限公司,北京京东世纪贸易有限公司
- 当前专利权人地址: 北京市海淀区杏石口路65号西杉创意园西区11C楼东段1-4层西段1-4层
- 代理机构: 中国国际贸易促进委员会专利商标事务所
- 代理商 许蓓
- 主分类号: G06F17/27
- IPC分类号: G06F17/27 ; G06F16/35
摘要:
本发明公开了一种商品短文本核心词提取方法和装置,涉及大数据处理领域。其中的商品短文本核心词提取方法包括:获取数据集内的商品短文本;对商品短文本进行分词处理;根据商品短文本的上下文信息获得商品短文本的文档向量;根据文档向量对数据集内的商品短文本进行聚类;确定商品短文本中的各个分词在商品短文本所属的类别的聚类层级权重;根据各个分词的聚类层级权重确定商品短文本的核心词。本发明参考了商品短文本中分词的上下文信息来获得该商品短文本的文档向量,可以弥补短文本信息量少的缺陷,使基于文档向量的聚类结果更准确,进而依据分词在其商品短文本所属聚类类别的权重可以更加准确地从商品短文本中提取出核心词。
公开/授权文献
- CN105808526A 商品短文本核心词提取方法和装置 公开/授权日:2016-07-27