基于python的朴素贝叶斯新闻分类

研究目的(选题的意义和预期应用价值)

近年来,随着计算机软硬件技术和互联网的高速发展,数据呈爆炸性增长,“信息过载” 问题越来越严重,全部依赖人来处理和分析的传统方式,面对海量信息的局面显得越来越捉襟见肘。由于新闻文本数量巨大,主题多样,用户想方便的获取符合自己个性化的新闻内容非常困难。传统的搜索引擎必须由用户提供明确关键词,才能实现对信息的检索和过滤。面对爆炸的数据,需要使用恰当的方法对文本进行分类,方便用户查看特定类别的新闻。

与本课题相关的国内外研究现状(文献综述),预计可能创新的方面

与本课题相关的国内外研究现状

当前机器学习分类算法主流的有svm、朴素贝叶斯、KNN等,支持向量机是一种有监督的学习方法,即已知训练点的类别,求训练点和类别之间的对应关系,以便将训练集按照类别分开,或者是预测新的训练点所对应的类别。它主要针对小样本数据进行学习、分类和预测(有时也叫回归)的一种方法,能解决神经网络不能解决的过学习问题。邻近算法,或者说K最近邻(KNN,K-NearestNeighbor)分类算法是数据挖掘分类技术中最简单的方法之一。所谓K最近邻,就是K个最近的邻居的意思,说的是每个样本都可以用它最接近的K个邻近值来代表。近邻算法就是将数据集合中每一个记录进行分类的方法.朴素贝叶斯分类是一种十分简单的分类算法,叫它朴素贝叶斯分类是因为这种方法的思想很朴素,对于给出的待分类项,求解在此项出现的条件下各个类别出现的概率,哪个最大,就认为此待分类项属于哪个类别,朴素贝叶斯算法是由贝叶斯定理发展而来,理论上来说,朴素贝叶斯分类算法与其他分类算法相比误差较小,在各个属性之间的相关性较小的情况下,朴素贝叶斯算法能达到较好的分类效果。相比较svm、knn,朴素贝叶斯最大的优点就是分类稳定,适合小规模数据和增量式训练,对缺失数据不敏感。故本课题主要采用朴素贝叶斯算法进行分类

研究的主要内容与可行性分析

研究的主要内容:

采用网上公开新闻数据集,使用朴素贝叶斯算法进行新闻分类

研究的可行性分析:

1用于训练的新闻文本数据可以从开源网站获取。

2 朴素贝叶斯算法的研究已经非常成熟可用

本课题研究的主要方法和步骤

主要方法:

从网上获取公开新闻数据集,然后进行数据清洗、入库。使用朴素贝叶斯算法进行新闻数据分类

步骤:

  1. 网上寻找开源数据集或者爬取各大网站新闻数据。
  2. 进行数据清洗、入库。
  3. 使用朴素贝叶斯算法进行新闻数据分类

【基于Python的机器学习的新闻分类系统】 https://www.bilibili.com/video/BV1L5411w7Gy/?share_source=copy_web&vd_source=3d18b0a7b9486f50fe7f4dea4c24e2a4

  • 8
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

源码空间站11

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值