趣味学python（015）

python——简单爬取包图网视频

今天小编学习了爬取包图网小视频。特来分享一下。?????

首先需要用到的库： requests, lxml , os

import requests
from lxml import etree
import os
#用于创建目录

需要构造请求头，简单的反爬措施

headers={
“User-Agent”:“Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko)
Chrome/75.0.3770.142 Safari/537.36”
}

确定请求网址：

#爬取包图网视频
response = requests.get(‘https://ibaotu.com/’, headers=headers)
#整理成文档对象

html = etree.HTML(response.text)
#开始抽取视频链接名字

需要根据网页结构进行元素定位：
在这里插入图片描述 确定名称

确定链接：

vid_src = html.xpath(’//div[@class=“video-play”]/video[@poster="//pic.ibaotu.com/01/70/70/43z888piCWGD.jpg-0.jpg!ffc384"]/@src’)
tit_are = html.xpath(’//li[@data-url="//ibaotu.com/sucai/18413546.html"]/@data-title’)

#下面就是整理，创建文件夹，保存二进制数据：
for vid, tit in zip(vid_src, tit_are):
if not os.path.exists(‘包图网视频’):
os.mkdir(‘包图网视频’)
src = ‘https:’ + vid
content1 = requests.get(src)
with open(‘包图网视频’ + ‘\’+ tit + ‘.mp4’, ‘wb’) as f:
f.write(content1.content)

下面展示结果：

好了，今天的分享就到这里，还是挺简单的呢！?????

读者可以自己去试一下????