Python Gensim:如何使用LDA模型计算文档相似度?

Python Gensim:如何使用LDA模型计算文档相似度?,第1张

Python Gensim:如何使用LDA模型计算文档相似度?

不知道这是否有帮助,但是当使用实际文档作为查询时,我设法在文档匹配和相似性方面获得了成功的结果。

dictionary = corpora.Dictionary.load('dictionary.dict')corpus = corpora.MmCorpus("corpus.mm")lda = models.LdaModel.load("model.lda") #result from running online lda (training)index = similarities.MatrixSimilarity(lda[corpus])index.save("simIndex.index")docname = "docs/the_doc.txt"doc = open(docname, 'r').read()vec_bow = dictionary.doc2bow(doc.lower().split())vec_lda = lda[vec_bow]sims = index[vec_lda]sims = sorted(enumerate(sims), key=lambda item: -item[1])print sims

语料库中所有文档与用作查询的文档之间的相似性得分将是每个sim卡的第二个索引。



欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/5601846.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-15
下一篇 2022-12-15

发表评论

登录后才能评论

评论列表(0条)

保存