Java爬虫利器HTML解析工具-Jsoup

Jsoup简介
  
  Java爬虫解析HTML文档的工具有:htmlparser, Jsoup。本文将会详细介绍Jsoup的使用方法,10分钟搞定Java爬虫HTML解析。
  
  Jsoup可以直接解析某个URL地址、HTML文本内容,它提供非常丰富的处理Dom树的API。如果你使用过JQuery,那你一定会非常熟悉。
  
  Jsoup最强大的莫过于它的CSS选择器支持了。比如:document.select("div.content > div#image > ul > li:eq(2)。
  
  包引入方法
  
  Maven
  
  添加下面的依赖声明即可,最新版本是(1.12.1)
  
  
  
  
  
  org.jsoup
  
  jsoup
  
  1.11.3
  
  
  
  Gradle
  
  // jsoup HTML parser library @
  
  compile ‘org.jsoup:jsoup:1.11.3’
  
  源码安装
  
  当然也可以直接把jar包下载下来,下载地址:https://www.xgjrfwsc.cn jsoup.org/download
  
  # git获取代码
  
  git clone https://www.yifayuLed.cn github.com/jhy/jsoup.git
  
  cd jsoup
  
  mvn install
  
  # 下载代码
  
  curl -Lo jsoup.zip https://github.com/jhy/jsoup/archive/master.zip
  
  unzip jsoup.zip
  
  cd jsoup-master
  
  mvn install
  
  Jsoup解析方法
  
  Jsoup支持四种方式解析Document,即可以输入四种内容得到一个Document:
  
  解析字符串
  
  解析body片段
  
  从一个URL解析
  
  从一个文件解析
  
  字符串解析示例
  
  字符串中必须包含head和body元素。
  
  String html = “First parse
  
  + "

Parsed HTML into a doc.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值