java 对网站静态资源文件的下载

最新推荐文章于 2022-06-15 16:58:59 发布

小馋

最新推荐文章于 2022-06-15 16:58:59 发布

阅读量541

点赞数

分类专栏：工作日志文章标签： java 文件upload下载批量下载upload web upload下载

本文链接：https://blog.csdn.net/qq764136933/article/details/103046101

版权

工作日志专栏收录该内容

8 篇文章 0 订阅

订阅专栏

public class Image {
    private static Map<String, String> config;
    static {
        if (null == config) {
            config = new HashMap<>();
        }
        config.put("url", "http://xxx.com/images/upload/image/");
        config.put("dest", "D:/image");
    }
    public static void main(String[] args) {
        recursion(config.get("url"));
    }

    private static void recursion(String url) {
        //HttpClient 请求
        String string = HttpUtil.get(url);
        //正则表达式，找到<a>标签的 href里面的值
        Pattern p = Pattern.compile("<a[^>]*>([^<]*)</a>");
        Matcher m = p.matcher(string);
        while (m.find()) {
            //根目录。需要结束当前循环。
            if (m.group(1).equals("../")) {
                continue;
            }
            //如果href 里面的值 包含了.png|.jpg等
            if (m.group(1).contains(".")) {
                HttpUtil.downloadFile(url + (m.group(1)) + "", config.get("dest"));
                continue;
            }
            //否则的话 递归进行下一个文件寻找
            recursion(url + m.group(1));
        }
    }
}