Python爬虫:利用爬虫下载B站视频

最新推荐文章于 2025-02-23 14:25:41 发布
最新推荐文章于 2025-02-23 14:25:41 发布
阅读量2.6k 收藏 18
点赞数 35
文章标签： python 爬虫 开发语言 音视频 网络
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_72225765/article/details/145575032
版权

前言：爬虫是一种按照一定规则，从互联网上自动获取信息的脚本。本篇文章会介绍，如何利用网络爬虫，获取哔哩哔哩网站上的视频。

开发环境：

python：3.8

第三方包：

requests：2.28.2

moviepy：1.0.3

浏览器：Edge 132.0.2957.140 (正式版本) (64 位)

第三方包安装：打开cmd，输入如下命令

pip install requests
pip install moviepy

一、获取视频地址

本文以“哔哩哔哩弹幕网”发布的跨年视频为例，在浏览器打开视频页面

 

按下F12，调出开发者人员工具，

并按下F5刷新，刷新后可捕捉到数据

在开发者人员工具中的网络一栏中，可以看到捕捉到的网站数据

在其中可以找到后缀为.m4s的文件，这一般为视频文件。

打开它，并在标头一栏复制请求URL

二、请求资源

打开Pycharm，导入requests库

import requests

请求视频资源,url变量为刚复制的网址

url=“https://cn-bj-cc-03-15.bilivideo.com/upgcxcode/38/13/28231731338/28231731338-1-100022.m4s?e=ig8euxZM2rNcNbdlhoNvNC8BqJIzNbfqXBvEqxTEto8BTrNvN0GvT90W5JZMkX_YN0MvXg8gNEV4NC8xNEV4N03eN0B5tZlqNxTEto8BTrNvNeZVuJ10Kj_g2UB02J0mN0B5tZlqNCNEto8BTrNvNC7MTX502C8f2jmMQJ6mqF2fka1mqx6gqj0eN0B599M=&uipk=5&nbs=1&deadline=1739271154&gen=playurlv2&os=bcache&oi=1732221544&trid=00007fa49ea6feaa4f3b9d8776b5e8daaf9bu&mid=0&platform=pc&og=cos&upsig=9bd0f0338287dd8772351c6c50d63809&uparams=e,uipk,nbs,deadline,gen,os,oi,trid,mid,platform,og&cdnid=3234&bvc=vod&nettype=0&orderid=0,3&buvid=330401BF-1E46-9ADE-9A3E-BE3A5CF7500468701infoc&build=0&f=u_0_0&agrr=1&bw=14168&np=151421001&logo=80000000”
#  这里的url便是刚才复制下来的请求url

res = requests.get(url) #  请求视频资源

print(res.status_code) #  打印状态码

这里的状态码显示若为403，说明请求被服务器拒绝了。这是因为服务器具有反爬机制，所以我们需要让我们的程序看起来更像是一个真实的用户。

回到浏览器，将标头一栏向下滑动，我们会看到在请求标头中，有许多的用户信息。

我们复制user-agent和referer这两项即可。

回到Pycharm，创建一个名为headers的字典。将复制的“user-agent”和“referer”以键值对的形式存入字典。

headers = {
"user-agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/132.0.0.0 Safari/537.36 Edg/132.0.0.0",
"referer":"https://www.bilibili.com/video/BV1XEPUefEd7/?spm_id_from=333.337.search-card.all.click"
}

在request的请求中，加入请求头headers

url=“https://cn-bj-cc-03-15.bilivideo.com/upgcxcode/38/13/28231731338/28231731338-1-100022.m4s?e=ig8euxZM2rNcNbdlhoNvNC8BqJIzNbfqXBvEqxTEto8BTrNvN0GvT90W5JZMkX_YN0MvXg8gNEV4NC8xNEV4N03eN0B5tZlqNxTEto8BTrNvNeZVuJ10Kj_g2UB02J0mN0B5tZlqNCNEto8BTrNvNC7MTX502C8f2jmMQJ6mqF2fka1mqx6gqj0eN0B599M=&uipk=5&nbs=1&deadline=1739271154&gen=playurlv2&os=bcache&oi=1732221544&trid=00007fa49ea6feaa4f3b9d8776b5e8daaf9bu&mid=0&platform=pc&og=cos&upsig=9bd0f0338287dd8772351c6c50d63809&uparams=e,uipk,nbs,deadline,gen,os,oi,trid,mid,platform,og&cdnid=3234&bvc=vod&nettype=0&orderid=0,3&buvid=330401BF-1E46-9ADE-9A3E-BE3A5CF7500468701infoc&build=0&f=u_0_0&agrr=1&bw=14168&np=151421001&logo=80000000”
#  这里的url便是刚才复制下来的请求url

headers = {
"user-agent":"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/132.0.0.0 Safari/537.36 Edg/132.0.0.0",
"referer":"https://www.bilibili.com/video/BV1XEPUefEd7/?spm_id_from=333.337.search-card.all.click"
} #  请求头


res = requests.get(url，headers=headers) #  请求视频资源

print(res.status_code) #  打印状态码

这时再运行程序，就能看到状态码为200，表示允许访问。

三、视频保存

接着我们需要把获取到的数据保存为视频格式。

with open("1.mp4","wb") as f:
    f.wirte(res.content)

"1.mp4"为视频的名字，“wb”是以二进制的形式写入文件。

不过这时打开视频发现没有声音，这是因为哔哩哔哩中视频文件和音频文件是分开存放的。

让我们回到浏览器，在刚才我们找到的视频文件下方有一个名为30216.m4s的文件，这大概率就是音频文件，复制它的请求URL

回到Pycharm，与视频请求相同，不过要把最后保存的文件改为mp3格式

import requests

url = "https://cn-bj-cc-03-06.bilivideo.com/upgcxcode/38/13/28231731338/28231731338-1-30216.m4s?e=ig8euxZM2rNcNbdlhoNvNC8BqJIzNbfqXBvEqxTEto8BTrNvN0GvT90W5JZMkX_YN0MvXg8gNEV4NC8xNEV4N03eN0B5tZlqNxTEto8BTrNvNeZVuJ10Kj_g2UB02J0mN0B5tZlqNCNEto8BTrNvNC7MTX502C8f2jmMQJ6mqF2fka1mqx6gqj0eN0B599M=&uipk=5&nbs=1&deadline=1739272044&gen=playurlv2&os=bcache&oi=1732221544&trid=000084fe9b683fdf47a68747429e38d9e5cau&mid=0&platform=pc&og=cos&upsig=d0bb8d9c253ee6da0486b9dba6099b63&uparams=e,uipk,nbs,deadline,gen,os,oi,trid,mid,platform,og&cdnid=3225&bvc=vod&nettype=0&orderid=0,3&buvid=330401BF-1E46-9ADE-9A3E-BE3A5CF7500468701infoc&build=0&f=u_0_0&agrr=1&bw=4479&np=151421001&logo=80000000"
headers = {
    "user-agent":
"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/132.0.0.0 Safari/537.36 Edg/132.0.0.0",
    "referer":
"https://www.bilibili.com/video/BV1XEPUefEd7/?spm_id_from=333.337.search-card.all.click"
    } #  音频网址

res = requests.get(url, headers=headers) #  请求音频

print(res.status_code) #  打印状态码

with open("2.mp3","wb") as f:
    f.write(res.content) #  保存文件

四、插入音频

最后我们需要用到moviepy库，将视频和音频结合起来

导入moviepy

from moviepy.editor import *

加载视频文件与音频文件

videoclip = VideoFileClip("1.mp4")
audioclip = AudioFileClip("2.mp3")

将音频文件加入视频中

vc = videoclip.set_audio(audioclip)

导出最终视频

vc.write_videofile("3.mp4",codec="libx264",audio_codec="aac")

在文件夹中打开“3.mp4”，发现视频有声音有画面，这样视频就下载到电脑中了。

五、完整代码

以下是完整代码：

import requests
from moviepy.editor import *

#  视频地址
url_4 = "https://cn-bj-cc-03-15.bilivideo.com/upgcxcode/38/13/28231731338/28231731338-1-100022.m4s?e=ig8euxZM2rNcNbdlhoNvNC8BqJIzNbfqXBvEqxTEto8BTrNvN0GvT90W5JZMkX_YN0MvXg8gNEV4NC8xNEV4N03eN0B5tZlqNxTEto8BTrNvNeZVuJ10Kj_g2UB02J0mN0B5tZlqNCNEto8BTrNvNC7MTX502C8f2jmMQJ6mqF2fka1mqx6gqj0eN0B599M=&uipk=5&nbs=1&deadline=1739272044&gen=playurlv2&os=bcache&oi=1732221544&trid=000084fe9b683fdf47a68747429e38d9e5cau&mid=0&platform=pc&og=cos&upsig=13ad871e2968d42e9273bc1136c99e44&uparams=e,uipk,nbs,deadline,gen,os,oi,trid,mid,platform,og&cdnid=3234&bvc=vod&nettype=0&orderid=0,3&buvid=330401BF-1E46-9ADE-9A3E-BE3A5CF7500468701infoc&build=0&f=u_0_0&agrr=1&bw=14168&np=151421001&logo=80000000"
#  音频网址
url_3 = "https://cn-bj-cc-03-06.bilivideo.com/upgcxcode/38/13/28231731338/28231731338-1-30216.m4s?e=ig8euxZM2rNcNbdlhoNvNC8BqJIzNbfqXBvEqxTEto8BTrNvN0GvT90W5JZMkX_YN0MvXg8gNEV4NC8xNEV4N03eN0B5tZlqNxTEto8BTrNvNeZVuJ10Kj_g2UB02J0mN0B5tZlqNCNEto8BTrNvNC7MTX502C8f2jmMQJ6mqF2fka1mqx6gqj0eN0B599M=&uipk=5&nbs=1&deadline=1739267031&gen=playurlv2&os=bcache&oi=1732221544&trid=00008aeb681ea5a649769a0081dfd0a50de2u&mid=0&platform=pc&og=cos&upsig=3e0231b32aa17c2eddf74b53c071c8c6&uparams=e,uipk,nbs,deadline,gen,os,oi,trid,mid,platform,og&cdnid=3225&bvc=vod&nettype=0&orderid=0,3&buvid=330401BF-1E46-9ADE-9A3E-BE3A5CF7500468701infoc&build=0&f=u_0_0&agrr=1&bw=4479&np=151421001&logo=80000000"
#  请求头
headers = {
    "user-agent":
        "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/132.0.0.0 Safari/537.36 Edg/132.0.0.0",
    "referer":
        "https://www.bilibili.com/video/BV1XEPUefEd7/?spm_id_from=333.337.search-card.all.click"
}


def get_resource(url, format):
    """
    用于爬取资源
    :param url: 资源的网址
    :param format: 保存的文件名称
    :return: None
    """
    res = requests.get(url, headers=headers)

    print(res.status_code)

    with open(format, "wb") as f:
        f.write(res.content)


def set_audio(f1, f2,f3):
    """
    用于音视频合成
    :param f1: 无声视频名称
    :param f2: 音频名称
    :param f3: 合成后（输出）的视频名称
    :return: None
    """
    videoclip = VideoFileClip(f1)
    audioclip = AudioFileClip(f2)

    vc = videoclip.set_audio(audioclip)

    vc.write_videofile(f3, codec="libx264", audio_codec="aac")


if __name__ == "__main__":
    get_resource(url_4, "1.mp4")
    get_resource(url_3, "2.mp3")
    set_audio("1.mp4","2.mp3","3.mp4")

瑆汵
关注
Python：使用爬虫抓取网页中的视频并下载（完整源码）
学习使你进步。
05-24 5238
这些网站的内容通常包含了各种类型的文件，其中最常见的就是视频。对于有经验的程序开发者来说，使用Python编写一个爬虫以自动化提取视频并下载它们是一项简单的任务。这可以是任何包含了视频和其他相关信息的网站。这里我们使用了一个特定的正则表达式，它可以匹配所有以.mp4为扩展名的链接。然后，我们遍历所有视频链接，并使用requests库下载它们。下载的视频将被保存在当前工作目录中，并按顺序命名为video1.mp4、video2.mp4等。通过使用类似本文中所示的技术，您可以轻松地从几乎所有的网站中提取数据。
Python爬虫：requests模块的基本使用
热门推荐
Hello大家好，我是Dream，如果帮得到你，那我深感荣幸！想进粉丝福利群及免费送书群，直接私信我拉你。交流学习、商务合作：https://bbs.csdn.net/topics/614347534
07-17 8万+
在url地址中， 很多参数是没有用的，比如百度搜索的url地址，其中参数只有一个字段有用，其他的都可以删除。对应的,在后续的爬虫中，越到很多参数的url地址，都可以尝试删除参数。需求：通过requests向百度首页发送请求，获取百度首页的数据。以上三种方法从前往后尝试，能够100%的解决所有网页解码的问题。我们在使用百度搜索的时候经常发现url地址中会有一个。模拟浏览器，欺骗服务器，获取和浏览器一致的内容。我们先写一个获取百度首页的代码。的方式获取响应的html页面。，那么该问号后边的就是。
如何在线下载哔哩哔哩上的视频
xgysimida的博客
07-15 2万+
坐高铁或者火车卧铺时，信号难免会差，因此就想看哔哩哔哩上一些离线的视频给自己充电，那么如何下载哔哩哔哩网站上的视频呢？接下来就由我给大家介绍一个方法，此方法不是每个视频都能下，因为有的视频进行加密了，但大部分的还是可以下载的。 1、打开网址：https://www.xbeibeix.com/api/bilibili/网址页面如下： 2、复制你想下载的哔哩哔哩视频的网址 3、 粘贴到解析密码框中，并点击解析视频 4、往下滚动页面，先点击播放按钮，播放1s以上就行 5、在播放视频...
python爬虫实战之b站视频下载-下
Harlan的博客
09-17 1354
前面所有的准备工作基本做完了，这篇帖子的主要目的是代码的编写，已经编写的流程分析等 下面是前面整理的数据： 进入用户空间获得视频的aid https://api.bilibili.com/x/space/arc/search?mid=149040332&pn=1&ps=25&jsonp=jsonp 通过aid请求pagelist 获得视频列表信息https://api.bilibili.com/x/player/pagelist?aid=883949473&a.
当python爬虫搭配起Bilibili唧唧，奇怪的生产力出现了
Ericam_
09-07 1万+
前言 最近需要大规模下载B站视频，同时要将下载好的视频用BV号进行重命名，最后上传至服务器。这个工作一开始我是完全手工完成的，通过游猴来下载，可是下载几十个视频还好，再多一点的话真是太烦了，而且生产力低下，因此诞生了编写脚本的想法。 一开始我需要在B站搜索关键词，然后不断点开视频后进行下载，同时在视频下载后还需要找到这个视频来修改BV号，效率实在太低，特别是当下载的视频多了，再返回来寻找它对应的BV号时也是个很繁琐的过程，因此决定进行编写python脚本。 本次的脚本可以大幅度提高工作效率，但是它并不是全自
python爬虫之b站视频下载(python学习笔记)
weixin_43875683的博客
08-11 5969
b站视频爬取（python学习笔记） 亲爱的b站自从在2020年3月23日将av号改为BV号后，之前的很多爬虫已经不能用了，暂时没看懂看懂这操作的意义所在，反而一大串大小写英文字母加数字的BV号让人很难记，反爬嘛？(滑稽)，那就爬一下玩一玩。 在网上简单搜一下资料就可以了解到b站视频下载需要两个参数aid和cid 这里参考了这个案例 以这个视频为例：https://www.bilibili.com/video/BV1J7411R7nV?p=1&share_medium=iphone&shar
简易爬虫实现B站视频下载
最新发布
weixin_51353402的博客
02-23 1063
大致的流程是：获取输入网页的源代码，然后进行解析，拿出标题、作者以及视频与音频的下载链接（b站视频是视频、音频分开的），然后利用moviepy合并视频即可。点击网络，选择全部，点击第一个带有番号的包，在其中找到cookie与user-agent，将其复制下来即可。
爬虫python下载视频_用python做爬虫下载视频
weixin_39609500的博客
11-20 408
用python有一段时间了，对python是十二分喜爱，在我看来python是个好工具，可以轻松简洁的帮我完成一些我想要完成的工作。下面和大家分享一下我用python爬取某网站视频的案例。用python去保存网站的视频，主要是为了后续的查看和备份。如果有需要做爬虫研究的同学可以一起探讨下。本文主要用到requests库和BeautifulSoup库。1.抓取视频第一步，分析目标网站的地址本文中我爬...
python爬虫：Python 爬虫知识大全
06-22
python爬虫：Python 爬虫知识大全； python爬虫：Python 爬虫知识大全； python爬虫：Python 爬虫知识大全； python爬虫：Python 爬虫知识大全； python爬虫：Python 爬虫知识大全； python爬虫：Python 爬虫知识...
B站视频python爬虫下载
03-29
B站视频python爬虫下载，注意修改video_bvid，通过视频链接可以查看。B站视频python爬虫下载，注意修改video_bvid，通过视频链接可以查看。B站视频python爬虫下载，注意修改video_bvid，通过视频链接可以查看。B站...
Python爬虫：如何下载懂车帝的电动车数据（完整代码）
09-13
Python爬虫：如何下载懂车帝的电动车数据（完整代码） 一、确定目标数据 二、请求接口 三、数据解析 四、数据存储 详情可看： https://blog.csdn.net/weixin_42108731/article/details/132860453
Python爬虫：分布式爬虫架构与Scrapy-Redis实现
weixin_39169967的博客
02-14 2799
在面对大规模的数据爬取任务时，单台机器的爬虫往往效率低下且容易受到性能瓶颈的限制。分布式爬虫通过利用多台机器同时进行数据爬取，可以显著提高爬取效率和处理能力。本文将介绍分布式爬虫的架构原理，并详细讲解如何使用Scrapy-Redis实现分布式爬虫。Scrapy-Redis是一个基于Scrapy框架的扩展，它利用Redis作为分布式存储和通信工具，实现了分布式爬虫的功能。
爬虫（四）下载视频
追風少年
07-03 1212
1.相关网址和库 参考文章：视频下载，那些事儿！ 网址 http://www.jisudhw.com/ 需要用到的库 requests、beautifulsoup、ffmpy3 2.代码实现 import os import requests import ffmpy3 from bs4 import BeautifulSoup from multiprocessing.dummy import Pool as ThreadPool class VideoSpider(object): de
爬虫下载B站视频全过程
mw的博客
11-06 1328
鼠标右键点击查看网页源代码，ctrl +F 搜索playinfo 可以找到相应的数据内容。出现，表示请求成功。获取视频数据信息 前端标签两个两个一起。（4）保存数据，保存本地。
Python爬虫实战 - 视频下载001
wupengfei_的博客
11-19 1583
一篇文件教会你如何下载网站视频内容，再也不愁流量不够用了
爬虫#爬短视频并下载
m0_62920807的博客
10-18 292
爬虫# 爬短视频并下载 分析网站 浏览器网站过程；浏览器请求视频服务器然后视频服务器反馈视频数据 爬虫过程；找到请求（模拟浏览器发送请求）网址（可以根据preview确定），在preview里找到反馈数据，再从里面提取视频播放地址和视频的名称，后面根据视频播放地址保存到本地。 发送请求 ①发送请求； import requests url=‘地址’ ②模拟浏览器； 请求头 header={user-agent…（浏览器信息）} r=requests.get（url，headers=header）.json
python爬虫爬取视频网站视频并下载
黑客CN博客
12-08 2380
以上是一个简单的爬虫爬取视频网站视频并下载的示例。需要注意的是，爬取视频网站视频可能涉及到版权问题，请遵守相关法律法规。
随机爬虫下载视频（附带教程与源码）
py的学习者
10-17 1304
首先简单的理解一下爬虫。即请求网站并且提取自己所需的数据的一个过程。至于怎么爬如何爬，将是后面进行学习的内容，暂且不必深究。通过我们的程序，可以代替我们向服务器发送请求，然后进行批量、大量的数据的下载。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值