公开(公告)号：CN110134766A

公开(公告)日：2019-08-16

申请号：CN201910384880.X

申请日：2019-05-09

Applicant: 北京科技大学

Inventor： 谢永红 ,  周越 ,  张德政 ,  阿孜古丽 ,  栗辉 ,  贾麒

IPC: G06F16/33 ,  G06F17/27

Abstract: 本发明的实施例公开一种面向中医古籍文献的分词方法和装置，所述方法包括：对中医领域的古籍文献进行预处理，生成训练语言模型的语料；对所述语料进行训练，生成语言模型；使用所述语言模型对所述古籍文献进行无监督分词，生成初步分词结果；根据词性关系、句式的固定搭配以及语言学知识，对所述初步分词结果进行总结，整理出切分规则，形成规则文件；根据所述规则文件中的规则，对所述初步分词结果进行第一次修正，生成第一次修正结果。

公开(公告)号：CN110134766B

公开(公告)日：2021-06-25

申请号：CN201910384880.X

申请日：2019-05-09

Applicant: 北京科技大学

Inventor： 谢永红 ,  周越 ,  张德政 ,  阿孜古丽 ,  栗辉 ,  贾麒

IPC: G06F16/33 ,  G06F40/216 ,  G06F40/289

Abstract: 本发明的实施例公开一种面向中医古籍文献的分词方法和装置，所述方法包括：对中医领域的古籍文献进行预处理，生成训练语言模型的语料；对所述语料进行训练，生成语言模型；使用所述语言模型对所述古籍文献进行无监督分词，生成初步分词结果；根据词性关系、句式的固定搭配以及语言学知识，对所述初步分词结果进行总结，整理出切分规则，形成规则文件；根据所述规则文件中的规则，对所述初步分词结果进行第一次修正，生成第一次修正结果。