python自动获取B站弹幕并生成词云

最新推荐文章于 2022-03-25 18:56:11 发布

这题要怎么做

最新推荐文章于 2022-03-25 18:56:11 发布

阅读量983

点赞数

分类专栏：爬虫互联网相关文章标签： python 爬虫 url

本文链接：https://blog.csdn.net/lifei1229/article/details/105694103

版权

本文介绍了如何使用Python通过requests和BeautifulSoup库获取B站视频的弹幕，然后将弹幕保存为txt文件，进一步利用wordcloud库生成词云。通过这个过程，读者可以了解到网络爬虫和数据可视化的基本应用。

摘要由CSDN通过智能技术生成

这是关于python自动获取B站弹幕并生成词云的小例子

1、思路

用requests获取B站的网页内容
用BS来解析网页内容，并获得弹幕
将弹幕保存本地txt中
读取txt采用wordcloud生成词云

2、导入库

# -*- coding=utf-8 -*-
import requests
from bs4 import BeautifulSoup
import re
import jieba
import wordcloud

3、根据B站av号来获取弹幕

def cid_from_av(av):
    url = 'http://www.bilibili.com/video/bv' + str(av)
    headers = {
   
        'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.106 Safari/537.36'}
    response = requests.get(url=url, headers=headers)
    response.encoding = 'utf-8'
    html = response.text

    # 用try防止有些av号没视频
    try:
        soup = BeautifulSoup(html, 'lxml')
        # 视频名
        title = soup.select('meta[name="title"]')[0][