首先去下载Jsoup的jar包,直接百度搜索下载就行了,我下载的jar包版本是1.10.3,然后导入jar包。
我的程序目录结构是这样的。
我现在要抓取的是http://www.nipic.com/photo/jingguan/shanshui/index.html这个网站的摄影图库中的所有风景图片,其中该图库中的图片有2010页,每页有20张图片,所以我要获取40200张图片,把这些图片全弄到本地磁盘,并且图片还可以查看的,数据也不能丢失。由于本文的着重点不是网页方面的知识而是爬虫方面的,所以这里就不说关于html和css等其他方面的知识了。根据浏览器的开发人员工具研究下要抓取的页面的内容。本文主要通过以下代码供大家学习,可以了解Jsoup框架怎么使用,用途在哪。
因为时间关