![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python爬虫
文章平均质量分 92
微笑的代码农
自学
展开
-
python爬虫思路总结
这里写目录标题啰嗦两句网络爬虫简介静态与动态网页静态网页动态网页http四种获取数据方式GET请求post请求GET与POST区别PUTDELETE爬虫常用库requests(找到数据)bs4(解析提取数据)lxml(解析数据)selenium库(解析提取数据)re模块csv(保存数据)scrapy框架总结啰嗦两句写这篇文章,总结一下python爬虫思路,都是我目前所遇到的,也希望能帮到大家。也让自己思路更清晰,遇到问题解决问题,具体问题具体分析。咱们抓紧时间,我还得赶去学习新知识!人生苦短,我用pyt原创 2021-07-08 19:20:17 · 1374 阅读 · 1 评论 -
xpath爬取大学排名700(python3)
@TOCxpath爬取大学排名700(python3)爬虫思路爬虫无非四个步骤,【找到数据】【解析数据】【提取数据】【保存数据】找到数据找到数据。找到你要爬取的网站,爬取的内容,本文网站:http://www.gaosan.com/gaokao/196075.html,爬取内容:【名次】【学校名称】【综合得分】【星级排名】。点击右键打开【检查】可以看到我们要爬取的内容在196075.html里面,说明他是一个静态网页解析数据解析数据本文用的是xpath,首先下载xpath插件,我用的是谷原创 2021-07-06 16:17:53 · 852 阅读 · 0 评论 -
python协程
这里写目录标题啰嗦两句协程实例找到数据解析数据和提取数据保存数据认识协程翻页啰嗦两句习惯性啰嗦两句,不论在学习的过程中遇到什么困难,请尽力去解决它,虽然眼下不如意,但是真的要相信越努力的越幸运,只有努力了才能把握机会。我也是小白,也是刚刚起步编程的路上,我觉得不管你现在怎样,最重要的还是看态度问题,你是不是真的想把事情做好,有没有努力去做。自我开始写博客,朋友看了说你写又没人看,为什么还要写呢?我在意的不是有多少人看,而在意的是能否坚持,余晖的某个角落,就是我在偷偷学习的地方。听到最多的就是,你不行,我原创 2021-07-08 04:25:15 · 121 阅读 · 0 评论