该博客介绍了如何使用爬虫抓取斗鱼平台的弹幕和礼物数据，并将其存储在MongoDB中。内容包括弹幕协议的公开信息，如何查询礼物送出记录，以及对主播收入和用户行为的潜在分析。作者提醒，需关注多天数据以进行有效分析，并提供了源码供读者研究。
效果如下
默认数据会保存到MongoDB，以房间号+时期
目前是保存了弹幕和礼物两种类型，斗鱼的弹幕协议已经公开，想要抓取更多信息的可以去看看。
可以用如下语句查询礼物送出记录：
db.getCollection('4537144_2018_12_27').find({gift_id: {
'$exists': true}})
可以将礼物价值加起来，计算某主播一天的总收入（然后不清楚斗鱼与主播自己之前如何分成的）。
还可以看看用户昵称、牌子、等级。一天的数据是没有价值的，多抓几天的，进行横向对比才有意思。
/* 1 */
{
&#
最低0.47元/天 解锁文章
扫一扫
755
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
