通过Servlet来进行爬虫图片的下载

本文介绍了如何利用Servlet和Jsoup库实现爬虫图片的下载。提供了ImgServlet和index.jsp的关键代码示例,并列出了所需的jar包。
摘要由CSDN通过智能技术生成

利用爬虫下载图片

一、代码

1.代码

ImgServlet代码:

package web;

import org.apache.commons.io.IOUtils;
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;

import javax.servlet.ServletException;
import javax.servlet.annotation.WebServlet;
import javax.servlet.http.HttpServlet;
import javax.servlet.http.HttpServletRequest;
import javax.servlet.http.HttpServletResponse;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.net.URL;

@WebServlet("/img")
public class ImgServlet extends HttpServlet {
    protected void doGet(HttpServletRequest request, HttpServletResponse response) throws  IOException {
        System.out.println("进来了");
        //1.根据网址获取它的网页源代码文档对象
        Document doc = Jsoup.connect("http://192.168.31.249:8080/zyz/").get();
        System.out.println(doc);
        //2.从文档doc对象中找到所有图片标签img
        Elements es = doc.select("img[src]");
        //3.遍历得到每一个图片标签
        for (Element e : es) {
            String src = e.attr("src");
            System.out.println(src);
            getImg(src);
        }
    }
    //下载图片的方法
    public void getImg(String imgPath){
        try {
            //1.借助URL--可以将网页上的图片以字节流的形式加载到程序中
            InputStream is = new URL("http://192.168.31.225:8080/zyz/" + imgPath).openStream();
            //2.指定一个图片保存路径--具体到文件名
            FileOutputStream os = new FileOutputStream("D:\\福利图片/"+System.currentTimeMillis()+".jpg");
            //3.io工具类,对接两个流
            IOUtils.copy(is,os);
        } catch (IOException e) {
            e.printStackTrace();
        }

    }
}

index.jsp代码:

<%@ page contentType="text/html;charset=UTF-8" language="java" %>
<html>
  <head>
    <title>首页</title>
  </head>
  <body>
    <input type="button" onclick="fun1()" value="开始爬图">
  </body>
  <script>
    function fun1() {
      location.href='/jml/img';
    }
  </script>
</html>

需要的jar包:
在这里插入图片描述

总结

以上就是通过servlet来实现爬虫爬取图片下载的全部代码。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值