qq_41200123的博客

飞机大战500行代码实现飞机大战import pygameimport sysfrom pygame.sprite import Spritefrom pygame.sprite import Groupfrom time import sleepimport pygame.font# 修改游戏的一些新设置class Settings(): """存储《外星人入侵》的所有...

实时数据挖掘目录实时数据挖掘序言1. 新浪财经实时数据挖掘实战1.1 获取网页源代码1.2 数据提取2. 东方财富网数据挖掘实战2.1 获取网页源代码2.2 编写正则表达式提取数据2.3 数据的清洗及打印输出2.4 实战代码3. 裁判文书网数据挖掘实战4. 巨潮资讯网数据挖掘实战4.1 获取网页源代码4.2 编写正则表达式提取数据4.3 数据清洗及打印输出4.4 实战代码结尾序言 通过使用S...

百度新闻信息爬取目录百度新闻信息爬取序言获取在百度新闻中搜索“阿里巴巴”的网页源代码编写正则表达式提取新闻信息数据清洗并打印输出实战完整代码序言 通过对百度新闻标题、链接、日期及来源的爬取，了解使用python语言爬取少量数据的基本方法。获取在百度新闻中搜索“阿里巴巴”的网页源代码 为了获得请求头，我们可以在谷歌浏览器中的地址栏中输入about:version,即可获得headers。...

Chapter4 数据预处理目录Chapter4 数据预处理序言数据清洗缺失值处理异常值处理数据集成实体识别冗余属性识别数据变换简单函数变换规范化连续离散属性化离散化过程常用的离散化方法属性构造小波变换数据规约属性规约数值规约小结序言 在数据挖掘中，海量的原始数据中存在着大量不完整(有缺失值)、不一致、有异常的数据，严重影响到数据挖掘建模的执行效率，甚至可能导致挖掘结果的偏差，所以进行数...

Chapter3 数据探索目录Chapter3 数据探索序言数据质量分析缺失值分析异常值分析一致性分析数据特征分析分布分析对比分析统计量分析周期性分析贡献度分析相关性分析总结序言 根据观测、调查收集到初步的样本数据集后，接下来要考虑的问题是：样本数据集的数量和质量是否满足模型构建的要求？是否出现从未想过的数据状态？其中有没有什么明显的规律和趋势？各因素之间有什么样的关联性？ 通过检验数...

Chapter1 数据挖掘基础目录Chapter1 数据挖掘基础什么是数据挖掘数据挖掘的基本过程定义挖掘目标数据取样数据探索数据预处理模型评价什么是数据挖掘 从数据中淘金，从大量数据(包括文本)中挖掘出隐含的、未知的、对决策有潜在价值的关系、模式和趋势，并用这些知识和规则建立用于决策支持的模型，提供预测性决策支持的方法、工具和过程，就是数据挖掘。数据挖掘的基本过程定义挖掘目标 针对...

Chapter2 Python数据分析工具目录Chapter2 Python数据分析工具序言1. Numpy2.Scipy3.Matplotlib4. Pandas5. StatsModels6. Scikit-Learn7. Keras8. Gensim总结序言 Python本身的数据分析功能不强，需要安装一些第三方扩展库来增强它的能力。 如果安装了Anaconda发行版，那么它自带...

正则表达式序言 让大家久等了，萌萌小编又带来干货给大家了，大家准备双手接住了！这一次，我要介绍python中的re模块，还要隆重介绍正则表达式怎么在爬虫中使用，最后介绍一个爬虫小实战，具体是什么实战，请大家往下翻阅吧。基础部分 世界上的信息非常多，而我们关注的信息有限。假如我们希望只提取关注的数据，此时可以通过一些表达式进行提取，正则表达式就是其中一种进行数据筛选的表达式。当然正则表达式也...

基础知识讲解部分（网络爬虫入门）网络爬虫就是自动地从互联网上获取程序。想必你听说过这个词汇，但是又不太了解，大家会觉得掌握网络爬虫还是要花一些功夫的，因此这个门槛让你有点望而却步。我常常觉得计算机和互联网的发明给人类带来了如此大的便利，让人们不用阅读说明书就知道如何上手，但是偏偏编程的道路却又是如此艰辛。因此，我会尽可能做到浅显易懂，希望读者能够读懂我说了什么，从而能够享受到其中的快乐。基本介...