公开(公告)号：CN107168944A

公开(公告)日：2017-09-15

申请号：CN201710237926.6

申请日：2017-04-13

Applicant: 哈尔滨工程大学

Inventor： 王华扬 ,  宋奎勇 ,  何鸣 ,  王红滨 ,  王念滨 ,  陈龙 ,  王瑛琦 ,  童鹏鹏 ,  赵新杰 ,  王昆明

IPC: G06F17/27

CPC classification number: G06F17/2715 ,  G06F17/277

Abstract: 本发明提供的是一种LDA并行优化方法。主要包括CO‑PLDA并行优化算法和基于高斯函数的词加权方法。通过采用齐普夫定律的通信优化策略和一种改进的词权重计算方法，在文本表示精度不受影响的前提下，提高文本的表示效率。本发明中提出的CO‑PLDA模型的计算时间和通信时间都要优于AD‑LDA，其中CO‑PLDA模型的通信开销约为AD‑LDA的20％，计算时间约为AD‑LDA的70％左右。可见，CO‑PLDA在不失文本表示精度的前提下，有效地提高了模型的文本表示效率，降低了模型并行的通信开销，同时也适当降低了模型的计算时间。通过实验证明了CO‑PLDA算法文本表示效果要比AD‑LDA更好。