Python爬虫
文章平均质量分 83
大飞攻城狮
总是容易被往事打动
展开
-
golang 宝藏库推荐
前言 最近挺好奇的,B站每天Top100,具体什么视频最多,播放量和视频的弹幕数有没有比例关系。 所以,我们就来写一个Python爬虫,批量看看B站Top100是什么内容吧。 受限篇幅,只展现关键代码。Cron定时任务等,就不做展示啦。代码没有重构,如果有很大小伙伴需要,我重构了放GitHub吧~ 环境依赖 首先是Python的环境依赖,Python3自然不用多说。部分的依赖: bilibili_api==9.0.2 matplotlib==3.3.4 numpy==1.18....原创 2022-02-15 11:14:30 · 664 阅读 · 2 评论 -
Python采集电视剧《开端》弹幕做成词云图
大家好,本篇文章主要讲的是Python采集电视剧《开端》弹幕做成词云图,感兴趣的同学赶快来看一看吧,对你有帮助的话记得收藏一下。Python编程学习资料点击免费领取 目录 知识点介绍 环境介绍 网站分析 完整爬虫代码实现 结果展示 总结 知识点介绍 爬虫基本思路流程 requests模块的使用 pandas保存表格数据 pyecharts做词云图可视化 环境介绍 python 3.8 pycharm requests >>> pip instal原创 2022-01-25 17:19:03 · 182 阅读 · 0 评论 -
用Python采集《雪中悍刀行》弹幕做成词云实例
大家好,本篇文章主要讲的是用Python采集《雪中悍刀行》弹幕做成词云实例,感兴趣的同学赶快来看一看吧,对你有帮助的话记得收藏一下。编程学习资料点击免费领取 目录 前言 知识点介绍 环境介绍 代码实现 1. 导入模块 2. 发送网络请求 3. 获取数据 弹幕内容 4. 解析数据(筛选数据) 提取想要的一些内容 不想要的忽略掉 5. 保存数据 6. 词云图可视化 总结 前言 最近已经播完第一季的电视剧《雪中悍刀行》,从播放量就可以看出观众对于这部剧的期待,总播放量达到50亿,可让人原创 2022-01-20 17:04:50 · 316 阅读 · 1 评论 -
python爬取春节祝福语,并生成心形词云
前言 最近刚好在看爬虫,就爬取一下春节祝福语,生成个词云玩一玩,大家有兴趣可以试试,会奉上源代码,很简单。效果图如下: 环境 环境:windows, 语言:python,python版本是3.7 所依赖的第三方包: selenium----爬取网站,收集祝福语,这个库做UI自动化测试的估计会比较常见,我这里没采用使用requests库去爬取,用这个库的好处是爬取的过程中页面是实时可见的 wordcloud---用来生成词云 PIL---使词云生成...原创 2022-01-10 14:59:51 · 1195 阅读 · 3 评论 -
【JS 逆向百例】PEDATA 加密资讯以及 zlib.gunzipSync() 的应用
声明 本文章中所有内容仅供学习交流,抓包内容、敏感网址、数据接口均已做脱敏处理,严禁用于商业用途和非法用途,否则由此产生的一切后果均与作者无关,若有侵权,请联系我立即删除! 逆向目标 目标:某投资领域 SAAS 系统 PEDATA MAX 资讯,返回结果加密 主页:aHR0cHM6Ly9tYXgucGVkYXRhLmNuL2NsaWVudC9uZXdzL25ld3NmbGFzaA== 接口:aHR0cHM6Ly9tYXgucGVkYXRhLmNuL2FwaS9xNHgvbmV3c2ZsYX...原创 2022-01-09 12:00:00 · 206 阅读 · 0 评论