利用python+jieba+gensim+sklearn实现微博性别分类

本文档介绍了一个利用Python、jieba、gensim和sklearn实现的微博性别分类项目。通过处理微博文本,进行分词、训练词向量,然后使用svm进行分类。项目数据分为训练集和测试集,强调了测试集词向量需基于训练集词典生成,SVM输入需归一化,并提供了相关资源链接。
摘要由CSDN通过智能技术生成
一、任务需求
给定一组微博用户的微博帐号、性别和微博内容文本。以微博内容文本为特征,性别为标签,用数据的70%训练SVM分类器;再对剩下的30%微博文本进行性别预测,观察结果。

二、所用工具
python(Anaconda):编程环境
jieba:中文分词工具
gensim:训练词向量工具
sklearn:训练分类器工具


三、实现过程
1.数据准备

Data_weibo_male_female\GenderUserID中包含male.txt和female.txt,分别列出了各自属性的微博帐号。

  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值