![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
scrapy学习笔记
本菜鸡绝不放弃
本菜鸡绝不放弃
展开
-
Anaconda安装避坑
想学scrapy,所以图方便装了个anaconda,但是遇到了点坑,希望可以帮助到同样在初学scrapy的同学。 在安装anaconda时教程上说不要选“自动配置环境变量”,所以我就没选,想着装好之后自己配置,然后看了个半吊子教程,说环境变量量只要配置一个scripts就行了,然后我配完之后美滋滋,在终端查验是否安装成功,输入conda --version 结果还出来了版本信息,我...原创 2019-07-28 23:15:10 · 297 阅读 · 0 评论 -
pycharm编写简单scrapy爬虫并将数据写入sqlite
#一、写一个简单爬虫(以爬虫“7d”为例) 1、在项目存放目录下进入终端输入scrapy startproject spider(项目名,随便取) 2、打开pycharm->file->open打开项目,在spiders文件夹下新建python文件,开始编写爬虫(spiders文件夹里专门存放爬虫)以下代码只是参考,后面写入数据库的不是这个爬虫获取的信息。 3、在terminal输入...原创 2019-07-30 22:10:30 · 1664 阅读 · 0 评论 -
pycharm连接MySQL出现【08001】could not create connection to database server
记录一下 解决办法: 根据database修改URL,也就是在默认生成的URL后添加“?serverTimezone=UTC”即可原创 2019-08-01 13:26:58 · 849 阅读 · 3 评论 -
webdriver出现‘module’ is not callable
解决办法: http://www.freesion.com/article/755812003/ PS:我真的是服辣!原创 2019-08-05 20:10:27 · 1137 阅读 · 2 评论