java网页爬图片

import org.jsoup.Connection;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

import java.io.*;
import java.net.MalformedURLException;
import java.net.URL;
import java.net.URLConnection;
import java.net.URLEncoder;
/**
 * 下载图片到指定目录
 *
 * @param filePath 文件路径
 * @param imgUrl   图片URL
 */
public static void downImages(String filePath, String imgUrl) {
    // 若指定文件夹没有,则先创建
    File dir = new File(filePath);
    if (!dir.exists()) {
        dir.mkdirs();
    }
    // 截取图片文件名
    String fileName = imgUrl.substring(imgUrl.lastIndexOf('/') + 1, imgUrl.length());

    try {
        // 文件名里面可能有中文或者空格,所以这里要进行处理。但空格又会被URLEncoder转义为加号
        String urlTail = URLEncoder.encode(fileName, "UTF-8");
        // 因此要将加号转化为UTF-8格式的%20
        imgUrl = imgUrl.substring(0, imgUrl.lastIndexOf('/') + 1) + urlTail.replaceAll("\\+", "\\%20");

    } catch (UnsupportedEncodingException e) {
        e.printStackTrace();
    }
    // 写出的路径
    File file = new File(filePath + File.separator + fileName);

    try {
        // 获取图片URL
        URL url = new URL(imgUrl);
        // 获得连接
        URLConnection connection = url.openConnection();
        // 设置10秒的相应时间
        connection.setConnectTimeout(10 * 1000);
        // 获得输入流
        InputStream in = connection.getInputStream();
        // 获得输出流
        BufferedOutputStream out = new BufferedOutputStream(new FileOutputStream(file));
        // 构建缓冲区
        byte[] buf = new byte[1024];
        int size;
        // 写入到文件
        while (-1 != (size = in.read(buf))) {
            out.write(buf, 0, size);
        }
        out.close();
        in.close();
    } catch (MalformedURLException e) {
        e.printStackTrace();
    } catch (IOException e) {
        e.printStackTrace();
    }

}

public static void main(String[] args) {
    // 利用Jsoup获得连接
    Connection connect = Jsoup.connect("http://www.qq.com");
    try {
        // 得到Document对象
        Document document = connect.get();
        // 查找所有img标签
        Elements imgs = document.getElementsByTag("img");
        System.out.println("共检测到下列图片URL:");
        System.out.println("开始下载");
        // 遍历img标签并获得src的属性
        for (Element element : imgs) {
            //获取每个img标签URL "abs:"表示绝对路径
            String imgSrc = element.attr("abs:src");
            // 打印URL
            System.out.println(imgSrc);
            //下载图片到本地
            meizi.downImages("d:/img", imgSrc);
        }
        System.out.println("下载完成");
    } catch (IOException e) {
        e.printStackTrace();
    }
}
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值