jeremyli228的博客

转载 PyCharm+Scrapy爬取数据并存入MySQL

PyCharm+Scrapy爬取数据并存入MySQL一、创建爬虫项目二、创建爬虫并编写代码2-1、编写items.py2-2、编写spiders/douban.py2-3、编写pipelines.py2-4、编写settings.py三、使用Pycharm连接MySQL数据库四、创建爬虫项目对应的表以及执行爬虫。4-1、创建表4-2、执行爬虫4-3、查询数据，验证结果一、创建爬虫项目使用Terminal启动对应项目命令行scrapy startproject doubanSpider创建项目。