对20类新闻文章进行特征抽取

本文探讨如何利用Python和机器学习库sklearn对不同类型的新闻文本进行特征抽取,以用于后续的分析和建模。内容涉及文本预处理、向量化转换及特征选择等关键步骤。
摘要由CSDN通过智能技术生成
from sklearn.datasets import fetch_20newsgroups
from sklearn.feature_extraction.text import CountVectorizer
import jieba

def feature_news():

    """
        对20类新闻进行特征抽取
    :return: 
    """
    # 1.获取数据集
    news = fetch_20newsgroups(subset="all")

    # 2. 确定好特征值
    x = news.data

    # 3. 实例化一个转换对象
    count = CountVectorizer()
    date = count.fit_transform(x)

    print(count.get_feature_names())
    print(date[:2].toarray())
    print(len(count.get_feature_names()))


def cheases_feature():
    """
        对汉语字符串进行抽取
    :return: 
    """
    content1 = "今天很残酷,明天更残酷,后天很美好,但绝对大部分是死在明天晚上,所以每个人不要放弃今天。"
    content2 = "我们看到的从很远星系来的光是在几百万年之前发出的,这样当我们看到宇宙时,我们是在看它的过去。"
    content3 = "如果只用一种方式了解某样事物,你就不会真正了解它。了解事物真正含义的秘密取决于如何将其与我们所了解的事物相联系。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小徐的记事本

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值