python爬虫实践-腾讯视频弹幕分析

系列文章目录

python爬虫实践–晋江小说书籍分析
python爬虫实践-腾讯视频弹幕分析
python爬虫实践-B站弹幕分析

---

---

前言

编写这个程序的出发点是……研究弹幕文化？？额，不是，就是好奇，大家都发些什么，为什么有些弹幕反响很高，我每次发都无人问津（生气）

那还是和上次爬取晋江小说的程序流程差不多，就是进入网页，提取数据，存储数据。不同的只是网页编排方式不一样，只要找到合适的正则表达式，就可以把数据提出来。
哦，还有一个大问题，找到存储弹幕数据的文档规律最重要，这个解决了，基本这个程序就完成了。
当然，为了方便我们的数据更有质量，可以用程序筛选一下，比如重复的弹幕就只记录一条，100个点赞以下的弹幕不记录，还有按照点赞数从高到低排序。
下面开始上代码啦啦啦啦

目录

主程序模块

这个模块，把弹幕文档的基本格式先固定下来，就是baseurl，因为一集弹幕它可能有很多个文档，这些文档都由timestamp的值来区分，规律就是第一个文档的timestamp值是15，下一个文档的timestamp值加30，…………

if __name__=='__main__':
    #爬取整集弹幕
    baseurl = 'https://mfm.video.qq.com/danmu?otype=json&callback=jQuery191006002695521294066_1613526990594&target_id=6402048035%26vid%3Do003502jkv8&timestamp='
    for i in range(15, 2595, 30):
        url = baseurl + str(i)
        main(url)
        print('{}爬取完毕'.format(url