python爬虫
justgty
这个作者很懒,什么都没留下…
展开
-
Python中requests库基本用法
request库一、安装进入cmd进行安装pip install requests二、各种请求方式GET: 请求指定的页面信息,并返回实体主体。HEAD: 只请求页面的首部。POST: 请求服务器接受所指定的文档作为对所标识的URI的新的从属实体。PUT: 从客户端向服务器传送的数据取代指定的文档的内容。DELETE: 请求服务器删除指定的页面。get 和 post比较常见 GET请求将提交的数据放置在HTTP请求协议头中POST提交的数据则放在实体数据中三、发送请求与传递参数通原创 2020-06-12 20:26:15 · 208 阅读 · 0 评论 -
Python+requests 批量爬取网页图片超详细案例
注:仅供学习使用一、进入网址https://colorhub.me/由于我们在爬取网页的时候需要写入头部文件模拟浏览器,所以需要找到头部文件中的user-agent(1)、找到user-agent点击F12,进入开发者模式,找到network里面的colorhub.me,接着往下滑找到user-agent,将对应的值复制出来(2)、访问网址,获取HTML文本import requestsfrom lxml import etreeheader = { 'User-Agent': 'Moz原创 2020-06-12 19:49:51 · 5077 阅读 · 0 评论