爬取微博评论并提取主要关键词(二)

    在实现了微博评论爬取之后,可以对微博评论提取关键词了。
    具体思路是找自然语言处理包,在网上查了半天,中文包目前就看到推荐的snownlp以及jieba。看了一下它们各自的案例介绍,感觉snownlp里面的功能还是没有jieba里面的丰富,特别是不知道snownlp如何自定义分词,而jieba可以比较简单的添加自定义分词以及词性,于是就选了jieba包。

    首先我就针对其中一条微博的评论做了文本处理,代码如下:

import jieba
import jieba.analyse
import jieba.posseg as pseg
import re

jieba.suggest_freq('月子',True) 
jieba.add_word('月子',tag='n') 
jieba.suggest_freq('无创',True) 
jieba.add_word('无创',tag='n') 
jieba.suggest_freq('子宫',True) 
jieba.add_word('子宫',tag='n') 
jieba.suggest_freq('月嫂',True) 
jieba.add_word('月嫂',tag='n') 
jieba.suggest_freq('例假',True) 
jieba.add_word('例假',t
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值