Python对某视频弹幕进行爬取，完成文本数据分析

言澈｀

已于 2023-03-05 19:27:51 修改

阅读量870

点赞数 1

文章标签： python 数据分析数据挖掘信息可视化开发语言

于 2023-03-05 19:19:55 首次发布

本文链接：https://blog.csdn.net/m0_56140478/article/details/129349500

版权

本文利用Python的requests、jieba、wordcloud等库，实现对视频弹幕的抓取，进行分词、高频词统计、词性分析，并通过可视化展示结果，深入探索自然语言处理的应用。

摘要由CSDN通过智能技术生成

本文主要使用jieba、requests、wordcloud、matplotlib、imageio等包完成数据爬取、文本数据分析、可视化。

弹幕数据：

1.爬取弹幕数据、分词并统计高频词：

基于requests、re爬取数据：

import requests
import re
url="https://api.bilibili.com/x/v1/dm/list.so?oid=846322968"
response=requests.get(url)
response.encoding='utf-8'
content_list=re.findall('<d p=".*?">(.*?)</d>',response.text)
print(content_list)
for index in content_list:
    print(index)
    with open('xiaowangzi.txt',mode='a',encoding='utf-8')as f:
        f.write(index)
        f.write('\n')