weixin_45973206的博客

Linux（基于CentOS7）单机版Spark环境搭建

前言今天讲一下爬虫实战，用Python爬取百度新闻。本文用到的知识点：-requests-re正则表达式-MYSQL数据库-time库代码获取网页源代码 编写正则表达式提炼内容 数据清洗 编写舆情评分及数据深度清洗 打印清洗后的数据 将数据存入数据库及数据去重 批量爬取多家公司新闻舆论方式import requestsimport reimport pymysqlimport timeheaders = {'User-Agent': 'Mozilla...

官网sympy库文档地址：docs.sympy.org/sympy库是什么：sympy是一个Python的科学计算库，用一套强大的符号计算体系完成诸如多项式求值、求极限、解方程、求积分、微分方程、级数展开、矩阵运算等计算问题。虽然Matlab的类似科学计算能力也很强大，但是Python以其语法简单、易上手、异常丰富的三方库生态，使其可以更优雅地解决日常遇到的各种计算问题。前言：写这篇文档的目的是数学建模竞赛使用python编程软件来制作，而牵扯到了数学，则学习sympy库则是必不可缺的，所...

摘要　　Python是一种面向对象的解释型计算机程序设计语言，其使用，具有跨平台的特点，可以在Linux、macOS以及Windows系统中搭建环境并使用，其编写的代码在不同平台上运行时，几乎不需要做较大的改动，使用者无不受益于它的便捷性。　　此外，Python的强大之处在于它的应用领域范围之广，遍及人工智能、科学计算、Web开发、系统运维、大数据及云计算、金融、游戏开发等。实现其强大功能的前提，就是Python具有数量庞大且功能相对完善的标准库和第三方库。通过对库的引用，能够实现对不同领域业务的开