使用jsoup的一些技巧

24 篇文章 0 订阅
9 篇文章 0 订阅

简单使用jsoup:

代码如下: 

import org.jsoup.Connection;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
Class Test{
    public void main(String[] args){
        String url="http://www.baidu.com";
        Document doc = Jsoup.connect(url)
            .followRedirects(true) //设置系统重定向
            .timeout(1000 * 30) //超时时间
            .ignoreContentType(true)
            .ignoreHttpErrors(true)
            .get();
        System.out.println(doc);
    }
}

即可轻松抓取网页内容。

遇到问题:

1、jsoup抓取网页出现部分代码内容不全,如下图中标记:

这块代码采集不了,网上的一些答案也都试过,暂时不知道是什么原因,这里做个记号。

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值