![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
网络爬虫
timelessmemoryli
多思考,思想很重要。
展开
-
Webmagic网易云音乐爬虫
发现了一个java爬虫框架,熟悉了一下写了一个爬取网易云音乐专辑歌曲信息的爬虫,其中歌曲的歌词和评论是动态获取的,我只能单独自己写代码进行请求。代码如下import java.io.IOException;import java.io.UnsupportedEncodingException;import java.math.BigInteger;import java.securi原创 2016-10-28 11:39:35 · 3479 阅读 · 3 评论 -
网易云音乐爬虫--评论爬取以及Top Music统计
网易云云音乐评论十分有趣,于是就想写个爬虫爬取评论。但是不熟悉Python,就用java写了个。 主要使用了HttpClient,,Jsoup, 队列, 线程, log4j,poi生成Excel保存结果, 书写过程中主要一个问题就是评论获取,网易对其进行了加密,进行好一番搜索才找到解决方法。爬取歌单数,top歌曲数都可以动态进行配置. 目录结构原创 2016-10-26 17:17:08 · 17563 阅读 · 20 评论