爬虫第四篇——requests实例
一、获取网页并打印
还是以小破站作为例子进行演示
代码:
#-*- coding: utf-8-*
import requests
url = 'https://www.bilibili.com/'
r = requests.get(url)
r.encoding = r.apparent_encoding
print(r.text)
运行:
二、获取图片并下载到本地
比如我们要获取猫的图片(猜猜这是谁的猫)
先得右键到图片链接:猫
然后现在呢,我们要把这张图片下载下来
代码:
import requests
src = 'https://i0.hdslb.com/bfs/album/9d612159e38f3c9da853030f7fc3ecbcdcaf3bc9.jpg@518w.webp'
r = requests.get(src)
with open('tupian.jpg','wb') as f:
f.write(r.content)
print('下载完成')
运行:
我们找到这张图片打开看一看:
这样就得到了我们想要的图片
三、获取视频并下载到本地
获取视频和获取图片的方法一样,大家可以自己尝试一下,这里就不举例子了(版权问题),如果有问题请在评论区告诉我,后面再写一个获取视频的实例。
四、 百度关键词搜索爬取
代码:
import requests
#指定url
url = 'https://www.baidu.com'
kw =