简单的使用jsoup爬取图片

简单的使用jsoup爬取图片

首先,先要导入相关的jsoup.jar才能够使用jsoup

[jsoup.jar下载地址](http://download.csdn.net/detail/guanglancomet/9234349)





package com.guanglan.util;

import java.io.File;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.io.OutputStream;
import java.net.URL;
import java.net.URLConnection;

import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;


public class DownLoadPic {

    private static final String saveImgPath="E://imgs";
    //图片保存路径

    public void getDoc() throws IOException{
        //以网易为例子
        Document doc = Jsoup.connect("http://www.163.com/").get();
        //获取后缀为png和jpg的图片的元素集合
        Elements pngs = doc.select("img[src~=(?i)\\.(png|jpe?g)]");
        //遍历元素
        for(Element e : pngs){
            String src=e.attr("src");//获取img中的src路径
            //获取后缀名
            String imageName = src.substring(src.lastIndexOf("/") + 1,src.length());
            //连接url
            URL url = new URL(src);
            URLConnection uri=url.openConnection();
            //获取数据流
            InputStream is=uri.getInputStream();
            //写入数据流
            OutputStream os = new FileOutputStream(new File(saveImgPath, imageName));
            byte[] buf = new byte[1024];
            int l=0;
            while((l=is.read(buf))!=-1){
                os.write(buf, 0, l);
            }


        }
    }

    public static void main(String[] args) throws IOException {
        new DownLoadPic().getDoc(); //调用方法
    }
}

这里写图片描述

这里写图片描述

使用 Jsoup 爬取小红书页面图片,可以按照以下步骤进行操作: 1. 使用 Jsoup 获取小红书页面的 HTML 代码。 ```java Document doc = Jsoup.connect("https://www.xiaohongshu.com/discovery/item/5fce9d7c000000000101fbfa").get(); ``` 2. 在 HTML 代码中找到包含图片的元素,例如 `<img>` 标签。 ```java Elements imgs = doc.select("img"); ``` 3. 遍历图片元素,获取图片的 URL。 ```java for (Element img : imgs) { String imgUrl = img.attr("src"); // 处理图片 URL,例如下载图片到本地 } ``` 完整代码示例: ```java import org.jsoup.Jsoup; import org.jsoup.nodes.Document; import org.jsoup.nodes.Element; import org.jsoup.select.Elements; import java.io.FileOutputStream; import java.io.InputStream; import java.net.URL; import java.net.URLConnection; public class XiaohongshuImageCrawler { public static void main(String[] args) throws Exception { // 小红书页面 URL String url = "https://www.xiaohongshu.com/discovery/item/5fce9d7c000000000101fbfa"; // 获取 HTML 代码 Document doc = Jsoup.connect(url).get(); // 获取所有图片元素 Elements imgs = doc.select("img"); // 遍历图片元素,下载图片到本地 for (Element img : imgs) { String imgUrl = img.attr("src"); if (imgUrl.startsWith("//")) { imgUrl = "https:" + imgUrl; } if (imgUrl.startsWith("https://")) { downloadImage(imgUrl); } } } private static void downloadImage(String imgUrl) throws Exception { URL url = new URL(imgUrl); URLConnection conn = url.openConnection(); InputStream in = conn.getInputStream(); FileOutputStream out = new FileOutputStream("image.jpg"); byte[] buffer = new byte[1024]; int len; while ((len = in.read(buffer)) != -1) { out.write(buffer, 0, len); } out.close(); in.close(); } } ``` 注意:上述代码只是简单地将图片下载到本地,具体的图片处理方式需要根据实际需求进行修改。另外,小红书的页面结构可能会发生变化,代码中的选择器也需要根据页面结构进行调整。
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值