异步请求顺序调用

应用场景:在使用nodejs编写爬虫脚本时,有时会大量的调用接口,但是不能简单的for循环一次几百上千个接口同时出去,很刑

实现效果:将接口放在一个数组中,让程序按照顺序依次调用

const axios = require("axios");
const fs = require("fs");

async function getList() {
  const { data } = await axios({
    url: "获取请求地址列表",
    method: "get",
  });

  return data;
}

async function download(item) {
  //   console.log(item);
  await axios({
    method: "get",
    url: item.pic_url,
    responseType: "stream",
  }).then(function (response) {
    response.data.pipe(fs.createWriteStream(`./img/${item.id}.jpeg`));
  });
}

async function run() {
  let list = await getList();
  await list.reduce(async (prev, item, i) => {
    await prev;
    return new Promise(async (resolve, reject) => {
      await download(item);
      resolve();
    });
  }, Promise.resolve());
}

run();

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值