【Scrapy爬虫】（一）Scrapy框架的创建

最新推荐文章于 2023-04-29 15:34:05 发布

Big头哥

最新推荐文章于 2023-04-29 15:34:05 发布

阅读量228

点赞数

分类专栏： scrapy爬虫文章标签： python

本文链接：https://blog.csdn.net/weixin_43242795/article/details/104073244

版权

1 篇文章 0 订阅

订阅专栏

简述

刚打开cmd控制台，一般是进入下图红色框框的路径
在这里插入图片描述
可以自行选择路径，你将要创建的路径将保存在这个路径下，如下图我保存在E盘

cd..         # 表示返回上一层目录
E：          # 只有返回到根目录（C:\），才能输入E:进入E盘
cd Python    # 进入E盘下的Python文件夹（需要先创建Python文件夹）

在这里插入图片描述

在这里插入图片描述

scrapy startproject 名字 # 名字自定义，下图创建的文件名字为FileName

在这里插入图片描述

cd FileName # 表示进入刚刚创建好爬虫文件
scrapy genspider 自定义名字 目标爬虫网站 # 这里自定义名字为BaiDu，目标爬虫网站为百度官网
# 这一步会在FileName这个项目下的spiders文件下生成一个BaiDu.py文件，这个文件也是主要编写代码的文件

打开pycharm，进入第1步中设置的路径，打开文件
在这里插入图片描述

关注