微博情感分析 多分类

这篇博客介绍了如何进行中文微博的情感分析,利用贝叶斯算法进行八分类任务。数据集规模为(30000, 2),训练后作者生成并保存了两个模型,详细代码和数据可在作者的GitHub仓库找到。" 120524987,9766746,区块链技术详解:哈希、签名与共识机制,"['区块链', '密码学', '共识算法', '比特币', '数据结构']
摘要由CSDN通过智能技术生成

中文八分类贝叶斯

数据为(30000,2)

训练:

import pandas as pd
import jieba
from sklearn.feature_extraction.text import CountVectorizer
from sklearn.naive_bayes import MultinomialNB
from sklearn.externals import joblib

df_news = pd.read_csv('./data/data.csv',names=['data','label'],encoding='utf-8')
df_news = df_news.dropna()
content = df_news.data.values.tolist()
content_S = []
for line in content:
    current_segment = jieba.lcut(line)
    if len(current_segment) >= 1 and current_segment != '\r\n': #换行符
        content_S.append(current_segment)

df_content=pd.DataFrame({'data_S':content_S})
stopwords=pd.read_csv("stopwords.txt",index_col=False,sep="\n",quoting=3,names=['stopword'], encoding='utf-8')

def drop_stopwords(contents,stopwords):
    contents_clean = []
    all_word
  • 0
    点赞
  • 27
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值