![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python
学习笔记
笨小孩编程
这个作者很懒,什么都没留下…
展开
-
Python request requests模块 Python发送request请求
requests模块requests模块介绍requests 的使用流程1. 指定url2. 发起请求3.获取响应数据4.持久化存储requests模块 的安装装命令Python代码样例requests模块介绍python中原生的一款基于网络请求的模块,功能非常强大,简单便捷,效率极高。作用:模拟浏览器发请求。requests 的使用流程1. 指定url2. 发起请求 2.1设置请求参数 2.2设置请求头 2.3发送数据请求3.获取响应数据4.持久化存储requests模块 的安装原创 2021-01-22 15:41:40 · 939 阅读 · 1 评论 -
Python 爬虫 概念基础
1.什么爬虫 :通过编写的程序,模拟浏览器,然后通过互联网抓取数据分过程爬虫在使用中的分类:- 通用爬虫: 抓取系统的重要主城部分,抓取的是整张页面的数据。- 聚焦爬虫:建立在通用爬虫的基础上,抓取的是页面中特定的内容。- 增量式爬虫:检测网站中数据更新的情况,只会抓取网站中最新更新的数据。反爬机制:各个网站,通过制定相应的策略或技术手段,限制爬虫程序对网站数据的爬取。反反爬策略:爬虫程序可以通过制定相关的策略或者技术手段,破解门户网站中具备的反爬机制,破..原创 2021-01-21 23:59:46 · 81 阅读 · 0 评论