今天写的这篇文章是关于python爬虫简单的一个使用,选取的爬取对象是著名的招聘网站——拉钩网,因为和你们的职业息息相关,因此爬取拉钩的数据进行分析,对于职业规划和求职时的信息提供有很大的帮助。javascript
完成的效果html
爬取数据只是第一步,怎样使用和分析数据也是一大重点,固然这不是本次博客的目的,因为本次只是一个上手的爬虫程序,因此咱们的最终目的只是爬取到拉钩网的职位信息,而后保存到Mysql数据库中。最后中的效果示意图以下:java
控制台输入python
数据库显示mysql
准备工做git
首先须要安装python,这个网上已经有不少的教程了,这里就默认已经安装python,博主使用的是python3.6,而后安装了requests、pymysql(链接数据库使用)和Mysql数据库。github
分析拉勾网sql
首先咱们打开拉勾网,打开控制台,搜索java关键词搜索职位,选取北京地区,而后查看network一栏中的数据分析,查看第一个,是否是感受它很