safari video一次性获取一个文件_只要网速够快,小视频看完一个删一个,任性!Python爬取小视频...

fbb6b934859e3c0b072b487f6d3ee55d.png

前言

yy平台,直播界的先驱,有很多主播会把一些自己的直播精彩看点上传到该平台下的小视频栏目中

今天带大家爬取yy小视频栏目中所有的小视频

课程知识点:

1、动态数据抓包演示

2、json数据解析方法

3、视频数据保存

环境介绍:

python 3.6

pycharm

requests

爬虫的一般思路:

1、分析目标网页,确定爬取的url路径,headers参数

2、发送请求 -- requests 模拟浏览器发送请求,获取响应数据

3、解析数据

4、保存数据

导入工具

import requestsimport reimport pprint

分析目标网页,确定爬取的url路径,headers参数

url地址:

1cef384c06f32e1544805ecb17f27702.png

参数

564e1a4344a70b954a810050f147380c.png
url = 'https://api-tinyvideo-web.yy.com/home/tinyvideos?'headers = {    'user-agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.117 Safari/537.36',}param = {    'data': '{"uid":0,"page":1,"pageSize":10}',}

发送请求 -- requests 模拟浏览器发送请求,获取响应数据

32a805ea4aa13534dd6868830195b344.png
response = requests.get(url=url, headers=headers, params=param)data = response.json()# print(data)

解析数据

45cabbd6069dba833e0a667afb8ba4cc.png
# 提取字段data_list = data['data']['data']# 循环遍历for data1 in data_list:    resdesc = data1['resdesc'] + '.mp4'  # 视频的题目    resurl = data1['resurl']  # 视频的url地址    # print(resdesc, resurl)    # new_title = change_title(resdesc)    video_data = requests.get(resurl, headers=headers).content

保存数据

d7b548e2b547ed7d714e9167ebd8eba4.png
with open('video' + resdesc, mode='wb') as f:        print('正在下载:', resdesc)        f.write(video_data)

运行代码,效果如下:

169c22f345698fc64fe4a4ffacac8002.png

如果你处于想学Python或者正在学习Python,Python的教程不少了吧,但是是最新的吗?说不定你学了可能是两年前人家就学过的内容,在这小编分享一波2020最新的Python教程。获取方式,私信小编 “ 资料 ”,即可免费获取哦!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值