昨天的朋友圈都在丧心病狂的秀恩爱,秀520红包!于是就有人出来 普法教育。。。
可是还有更多老铁连发红包的机会都没有。。。
为什么这么多如此优秀的同学都还是单身呢?你有分析过自己单身的原因吗?
https://m.weibo.cn/api/container/getIndex?containerid=100103type%3D61%26q%3D%2390%E5%90%8E%E5%8D%95%E8%BA%AB%E5%8E%9F%E5%9B%A0TOP3%23%26t%3D0&isnewpage=1&extparam=pos%3D41%26c_type%3D31%26realpos%3D40%26flag%3D0%26filter_type%3Drealtimehot%26cate%3D0%26display_time%3D1565179797&luicode=10000011&lfid=106003type%3D25%26t%3D3%26disable_hot%3D1%26filter_type%3Drealtimehot&page_type=searchall
我们发现普通话题的分页机制竟然是page的形式,看来微博对不同级别的话题有不同的分页机制! page形式的分页机制,之前我们讲了很多个案例,直接for循环传入i,而这个i就当作page就可以啦!
之前调查结果显示单身的三大原因是: 圈子小、工作忙、对爱情幻想过于完美。 在我们数据分析得出的结果好像确实如此! 之前大家都说
单身是因为穷
看来穷的是我 不是大家
![640?wx_fmt=jpeg](https://i-blog.csdnimg.cn/blog_migrate/ccd609aec3deb4418300f14da538b266.jpeg)
可是还有更多老铁连发红包的机会都没有。。。
![640?wx_fmt=jpeg](https://i-blog.csdnimg.cn/blog_migrate/109042ca940659272e851622ea20d087.jpeg)
为什么这么多如此优秀的同学都还是单身呢?你有分析过自己单身的原因吗?
一、需求背景
七夕之际,一份针对全国90后青年婚恋观进行抽样调查公布了结果。结果显示,一线城市单身占比持续领先。90后单身原因TOP3:圈子小、工作忙、对爱情幻想过于完美。
二、功能描述
三、技术方案
模拟登录微博
爬取话题
保存文件
数据清洗
数据分析
四、模拟登录
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/c74e81c49cfefa3601a070c695a38ab7.jpeg)
五、爬取话题
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/793e7d66cee9dfcb1844258a4af6899c.jpeg)
https://m.weibo.cn/api/container/getIndex?containerid=100103type%3D61%26q%3D%2390%E5%90%8E%E5%8D%95%E8%BA%AB%E5%8E%9F%E5%9B%A0TOP3%23%26t%3D0&isnewpage=1&extparam=pos%3D41%26c_type%3D31%26realpos%3D40%26flag%3D0%26filter_type%3Drealtimehot%26cate%3D0%26display_time%3D1565179797&luicode=10000011&lfid=106003type%3D25%26t%3D3%26disable_hot%3D1%26filter_type%3Drealtimehot&page_type=searchall
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/40527915c30d990ff4addb31505758e9.jpeg)
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/c9a2d535a38ce6668276a38610921bc2.jpeg)
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/3e75234e32e15ec38a504c3a8bc2ef5e.jpeg)
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/bc99b129b2264d55d74d734235783990.jpeg)
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/85b93c8c67c52c22a69e81baa28b7cae.jpeg)
六、批量爬取
微博超话分页机制:根据时间分页,每一条微博都有一个since_id,时间越大的since_id越大所以在请求时将since_id传入,则会加载对应话题下比此since_id小的微博,然后又重新获取最小since_id将最小since_id传入,依次请求,这样便实现分页
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/1a50ff35d0b155244b2831e2f3000f39.jpeg)
我们发现普通话题的分页机制竟然是page的形式,看来微博对不同级别的话题有不同的分页机制! page形式的分页机制,之前我们讲了很多个案例,直接for循环传入i,而这个i就当作page就可以啦!
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/3288366023616cd6801e28058453bb50.jpeg)
七、数据分析
pyecharts库
,这是一个非常好用的可视化分析库!
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/f2056797eab4294ddef1164636c6576c.jpeg)
pyecharts库
做展示!
![640?wx_fmt=png](https://i-blog.csdnimg.cn/blog_migrate/8b5d8d07b12704f08efa435db588bbe8.jpeg)
之前调查结果显示单身的三大原因是: 圈子小、工作忙、对爱情幻想过于完美。 在我们数据分析得出的结果好像确实如此! 之前大家都说
单身是因为穷
看来穷的是我 不是大家
【完】
如果这篇文章对你有帮助
请帮忙转发,点个在看