![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
scrapy
TheOCD
这个作者很懒,什么都没留下…
展开
-
scrapy框架初识笔记
首先我们下载并安装Scrapy pip install scrapy #配置框架 接着我们就创建第一项目 scrapy startproject spider_project_name #当前路径下创建一个爬虫项目 接着我们进入这个项目并创建一个具体的爬虫 cd spider_project_name #进入对应爬虫项目的文件夹 scrapy genspider spider_name yum...原创 2019-10-07 20:27:08 · 192 阅读 · 0 评论 -
logging模块的使用
scrapy settings 中设置LOG_LEVEL=“WARNING” settings 中设置LOG_FILE="./A.LOG"#设置日志保存的位置,设置后终端不再显示日志内容 import logging 实例化logger的方式在任何文件中使用logger输出内容 普通项目中 import logging logging.basicConfig(…)#设置日志输出的央视格式 实...原创 2019-10-10 14:19:04 · 166 阅读 · 0 评论