python 爬取周董新歌《Mojito》MV弹幕，一文搞懂JVM架构

这里还有最后一点需要提醒大家的。观察目录页的那个接口(网址如下)，里面有一串字符串BV1PK4y1b7dt，我们先不管这个参数是什么，我们只关心这个字符串从哪里来的呢？

https://api.bilibili.com/x/player/pagelist?bvid=BV1PK4y1b7dt&jsonp=jsonp

最后我们观察这首MV的原始网址(网址如下)，原来这个字符串就在这首MV的原始网址中。好了，说到这里，我就将B站弹幕数据爬取的一些参数的来龙去脉，给大家讲清楚了，下面我们开始代码部分吧。

https://www.bilibili.com/video/BV1PK4y1b7dt?t=1

代码如下：

---

import requests

import json

import chardet

import re

from pprint import pprint

1.根据bvid请求得到cid

def get_cid():

url = ‘https://api.bilibili.com/x/player/pagelist?bvid=BV1PK4y1b7dt&jsonp=jsonp’

res = requests.get(url).text

json_dict = json.loads(res)

#pprint(json_dict)

return json_dict[“data”][0][“cid”]

2.根据cid请求弹幕，解析弹幕得到最终的数据

“”"

注意：哔哩哔哩的网页现在已经换了，那个list.so接口已经找不到，但是我们现在记住这个接口就行了。

“”"

def get_data(cid):

final_url = “https://api.bilibili.com/x/v1/dm/list.so?oid=” + str(cid)

final_res = requests.get(final_url)

final_res.encoding = chardet.detect(final_res.content)[‘encoding’]

final_res = final_res.text

pattern = re.compile(‘<d.?>(.?)’)

data = pattern.findall(final_res)

#pprint(final_res)

return data

3.保存弹幕列表

def save_to_file(data):

with open(“dan_mu.txt”, mode=“w”, encoding=“utf-8”) as f:

for i in data:

f.write(i)

f.write(“\n”)

cid = get_cid()

data = get_data(cid)

save_to_file(data)

结果如下：

词云图的制作

---

生成词云的几种方式对比

代码如下：

1 导入相关库

import pandas as pd

import jieba

from wordcloud import WordCloud

import matplotlib.pyplot as plt

from imageio import imread

import warnings

warnings.filterwarnings(“ignore”)

2 读取文本文件，并使用lcut()方法进行分词

with open(“dan_mu.txt”,encoding=“utf-8”) as f:

txt = f.read()

txt = txt.split()

data_cut = [jieba.lcut(x) for x in txt]

现在能在网上找到很多很多的学习资源，有免费的也有收费的，当我拿到1套比较全的学习资源之前，我并没着急去看第1节，我而是去审视这套资源是否值得学习，有时候也会去问一些学长的意见，如果可以之后，我会对这套学习资源做1个学习计划，我的学习计划主要包括规划图和学习进度表。

分享给大家这份我薅到的免费视频资料，质量还不错，大家可以跟着学习

小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数初中级Python工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Python爬虫全套学习资料》送给大家，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频

如果你觉得这些内容对你有帮助，可以添加下面V无偿领取！（备注：python）

单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。**

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频

如果你觉得这些内容对你有帮助，可以添加下面V无偿领取！（备注：python）
[外链图片转存中…(img-Y5AI90Hx-1711193817916)]