java爬虫 教程_Java爬虫其实也很简单，教你实用的入门级爬虫

原标题：Java爬虫其实也很简单，教你实用的入门级爬虫

任何语言都是可以爬虫的，只要你懂的常用的http协议啥的就可以模仿浏览器的行为获取你想要的数据。这里我将教大家一个简单实用的案例：如何获取全民K歌的下载链接。

ps: 这主要是教大家一个入门级的爬虫，不是希望大家去跳过vip下载...

那种专业fildder这类软件抓包我就不提了，免得文章显得更加复杂化。

推荐用谷歌浏览器容易看。

1.打开浏览器进去一个分享链接

2.按F12进入开发者模式

3.点击NetWork

4.最好重新刷新一下页面看下所有访问路径

只要是网页浏览器就可以抓到所有的访问请求。接下来就是寻找那个音乐的链接了：

等你找到你会发现很显然，那个路径没有任何规律，也不知道下载路径如何而来。但是只要思想不滑坡，办法总比困难多。我们找一下是否可以在HTML这些直接找到现成的链接,音乐的播放标签一般都是audio

我们去Element查找这个节点的时候可以发现确实有下载链接

这样我们大概知道链接的地址了!我们就可以放开手撸代码了!

这里我推荐用Jsoup，我用的是版本是1.11.2。

maven：http://www.mvnrepository.com/artifact/org.jsoup/jsoup/1.11.2

打印出来的HTML不出所料，就找不到audio的标签，很明显是后续才加载出这个标签来播放音乐的。那这个下载地址是哪里来的呢。我们可以在打印出来的HTML可以找到其他线索：

不出所料，在所有标签中 的第三个我们发现了猫腻。

所有的数据都在这个标签里，包括评论，送花，歌曲链接等等所有都在里面。我们拿到标签里的内容就可以了。里面的参数竟然是标准的json格式更加天助我也!我们用代码去掉闲杂人等。

接下来就是Json解析成自己的实体类对象啥的了。这块没啥好说的，不是我们的教程范围。我一般用的simpleJson，gson，fastJson。阿里巴巴的我用的多一点。

最后我把这段代码功能接入我的微信公众号实现效果：

该教程仅供学习参考返回搜狐，查看更多

责任编辑：