![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python爬虫
「已注销」
这个作者很懒,什么都没留下…
展开
-
python爬虫学习-02requests库
requests模块 - urllib模块 - requests模块 requests模块:python中原生的一款基于网络请求的模块,功能非常强大,简单便捷,效率极高。 作用:模拟浏览器发请求。 如何使用:(requests模块的编码流程) - 指定url - UA伪装 - 请求参数的处理 - 发起请求 - 获取响应数据 - 持久化存储 环境安装: pip install requests 实战编码: - 需求:爬取搜狗首页的页面数据 实战巩固 - 需求:爬取搜狗指定词条对应的搜索结果页面(简易网页采集器原创 2020-07-14 17:30:29 · 253 阅读 · 0 评论 -
python爬虫学习-01爬虫介绍
前戏: 1.你是否在节假日出行高峰的时候,想快速抢购火车票成功… 2.你是否在网上购物的时候,想快速且精准的定位到口碑质量最好的商品… 什么是爬虫: - 通过编写程序,模拟浏览器上网,然后让其去互联网上抓取数据的过程。 爬虫的价值: - 实际应用 - 就业 爬虫究竟是合法还是违法的? 在法律中是不被禁止 具有违法风险 善意爬虫 恶意爬虫 爬虫带来的风险可以体现在如下2方面: - 爬虫干扰了被访问网站的正常运营 - 爬虫抓取了收到法律保护的特定类型的数据或信息 如何在使用编写爬虫的过程中避免进入局子的厄原创 2020-07-14 17:27:12 · 175 阅读 · 0 评论