![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
风雨雾凇
这个作者很懒,什么都没留下…
展开
-
python爬虫爬取拉勾网职业信息
先放成果招聘关键字词云 公司关键字词云 代码git地址:https://github.com/fengyuwusong/lagou-scrapy目标抓取拉钩关于java工程师的招聘信息并制作成词云图。研究目标网站打开拉钩网可以发现目标url为:https://www.lagou.com/zhaopin/Java/2/?filterOption=2 ,这通过原创 2018-01-21 14:36:11 · 7437 阅读 · 0 评论 -
爬虫准备—logging模块的使用
为什么使用logging模块?为什么我们要使用logging模块来代替print函数记录日志呢?因为使用模块可以更好的管理我们的日志,并且可以将标准输入输出保存到日志文件,而且利用logging模块可以部分代替debug的功能,给程序排错。简述logging模块默认情况分为6个级别: NOTSET : 0 DEBUG : 10 INFO:20 WARNING : 30 ERROR :原创 2018-01-14 17:33:04 · 1886 阅读 · 0 评论 -
scrapy爬取豆瓣电影列表
目标环境:python 3.6 scrapy 1.5.0准备:安装scrapy ,参考:http://blog.csdn.net/yctjin/article/details/70658811 检查是否安装成功 ,在命令行输入:scrapy -version 如图所示则安装成功~开始新建项目在准备好的文件夹打开命令行,分别输入 scrapy startproject doubanMovi原创 2018-01-15 13:02:52 · 3989 阅读 · 0 评论 -
error: Microsoft Visual C++ 14.0 is required. pip安装错误...
错误重现:使用pip install mysql-python 安装 mysql包时出现错误: 提示错误: error: Microsoft Visual C++ 14.0 is required解决方法:通过提示我们可以得知是由于c++依赖库不存在,所以在对包进行编译的时候出错,故我们可以去直接下载二进制安装包进行安装。下载地址:https://www.l原创 2018-01-17 23:40:34 · 26500 阅读 · 0 评论