利用相似度推送文章

相似度使用算法:TF-IDF相似度使用的包:gesim/jieba相似度的计算步骤:           1)读取文档      2)对要计算的文档进行分词      3)对文档进行整理成指定格式,方便后续的计算      4)计算出词语的频率           5)【可选】对频率低的词语进行过滤       6)通过语料库(corpus从文本中提取出的语言材料)建立词典     ...
摘要由CSDN通过智能技术生成

相似度使用算法:TF-IDF

相似度使用的包:gensim/jieba

相似度的计算步骤:

           1)读取文档
     2)对要计算的文档进行分词
     3)对文档进行整理成指定格式,方便后续的计算
     4)计算出词语的频率  
         5)【可选】对频率低的词语进行过滤
       6)通过语料库(corpus从文本中提取出的语言材料)建立词典
       7)加载要对比的另一个文档
         8)将要对比的文档通过doc2bow转化为稀疏向量
           9)对稀疏向量进行进一步处理,得到新语料库,将新语料库进行处理
           10)通过models将新语料库通过TF-IDF模型进行处理,得到TF-IDF
       

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值