![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
csdn分析
文章平均质量分 79
小小明-代码实体
高阶数据处理玩家带你高端姿势玩数据!!!关注我发现更多精彩~
展开
-
5分钟教会你用Python采集CSDN的热榜
上次发了一篇《热榜标题词云实时更新词云上线,给标题起名提供参观建议》,今天突然上热榜一一段时间,还被范博at了。虽然对上热榜本身已经无感,但是被范博at还非常让我高兴的。这到晚上后,有人在评论区问到热榜数据怎么爬。热心的我,现在就花几分钟时间教会大家。首先,打开热榜页面并打开开发者工具,监控xhr类型的请求:然后复制为curl(bash)类型的请求:然后我们在jupyte中执行:!curl2py注意:该命令需要安装filestools安装命令:pip install filest原创 2021-10-24 18:38:53 · 39391 阅读 · 166 评论 -
造福C站全体用户,文章漫游者v0.2开放下载
大家好,我是小小明。近段时间原力计划群,有很多博主都提出了希望备份博客到本地。热心的我第二天立马开发了一个nodejs的富文本转Markdown的服务。对于第一位提这个问题群友,我测试了对他的博客进行批量爬取并转换为Markdown,经测试对于他的1198篇文章仅耗时13分钟:不过考虑到有一些人将别人的博客爬了之后转成PDF上传到csdn的付费文档,这种恶心人的做法,所以这个批量爬别人的文章并转换的代码,我就不公布了。但是没关系,相信有导出文章需求的人都是需要导出自己的文章,这几天我开发了一个更牛逼原创 2021-10-20 22:01:20 · 40338 阅读 · 165 评论 -
CSDN热榜排名追踪工具上线,随时查看热榜链路数据
大家好,我是小小明。今天大家期待已久的热榜追踪神器上线了,包含历史热榜搜索器和近两日热榜排名等。历史热榜追踪数据搜索:http://xxmdmst.top:8000/static/search.html热榜涨粉榜top50:http://xxmdmst.top:8000/rankfollow/热榜追踪程序演示下面我们分别来看看这两个网页:历史热榜追踪数据搜索打开网页后界面如下:该网页默认展示最近上榜的20条数据,我们可以通过搜索找到我们需要的数据。例如我们想查看昵称中包含java的用户上原创 2021-11-05 22:03:52 · 38036 阅读 · 146 评论 -
热榜标题词云实时更新词云上线,给标题起名提供参观建议
大家好,我是小小明。想上热榜的童鞋注意了,10分钟更新一次的热榜标题词云出炉,标注当前标题热门,给您的标题起名提供参观建议。链接地址:http://xxmdmst.top:8000/hotrank/all/例如当前热门标题为:没错,就是Java,出现了8次比原本最热的python多出现了3次,说明在官方调整各领域的权重之后,python的热度已经被限制到低于Java。近期官方给热榜换了新算法,算法规则已经变换莫测扑所迷离,0阅读或者发一堆哈哈哈也能上热榜。导致了如今的热榜已经彻底废掉,希望热榜有原创 2021-10-22 20:58:41 · 38062 阅读 · 128 评论