node爬取某个网站的图片,并下载到本地

const cheerio = require("cheerio");
const axios = require("axios");
const fs = require("fs");
const path = require("path");

let httpUrl = "http://www.netbian.com/dongman/index.htm";

let dirName = path.join(__dirname,"images");
if(fs.existsSync(dirName)){
    console.log("文件夹已存在");
}else{
    fs.mkdir(dirName,()=>{
        console.log("文件夹创建成功");
    });
}

async function getData(){
    let htmlData = await axios.get(httpUrl);
    let $ = cheerio.load(htmlData.data);
    $("#main .list ul li a img").each(async (index,item)=>{//定位到当前图片元素img
        let imgUrl = $(item).attr("src");//获取到当前的img路径
        let srcFile = path.join(dirName,path.parse(imgUrl).base);
        let ws = fs.createWriteStream(srcFile);
        axios.get(imgUrl,{responseType:"stream"}).then((res)=>{//请求当前图片
            res.data.pipe(ws);//将请求的图片数据copy到srcFile文件路径中
            res.data.on("close",()=>{
                console.log("图片" + path.parse(imgUrl).base + "已经下载完成");
                ws.close();
            })
        })
    })
}

getData();

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Agwenbi

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值