- 博客(1)
- 收藏
- 关注
原创 python爬虫之scrapy框架
1.在pycharm下安装scrapy函数库2.将安装好scrapy函数库下的路径配置到系统path的环境变量中3.打开cmd终端输入:scrapy.exe检查是否安装成功4.创建一个项目:scrapy startproject 项目名字5.cd进入该目录下,创建一个spider:scrapy genspider 项目名字 网址6.编辑settings.py文件中的USER_AGENT选项为正常的浏览器头部7.执行这个spider:scrapy crawl 项目名字8.如果遇到因pip版本太低
2021-11-23 21:18:08 400
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人