node js简单爬取网页图片

```handlebars
/**
 * 请求网站实例
 * 将数据保存本地文件
 */

const http = require('https');
const fs = require('fs');
const cheerio = require('cheerio');

let url = 'https://www.csdn.net/';

http.get(url, (res) => {
    //安全判断
    const { statusCode } = res; //状态码
    const contentType = res.headers['content-type']; //文件类型
    console.log(statusCode, contentType);

    let err = null;
    if (statusCode !== 200) {
        err = new Error('请求状态错误')
    } else if (!/^text\/html/.test(contentType)) {
        // 格式内容是网页
        err = new Error('请求类型错误')

    }
    if (err) {
        console.log(err);
        res.resume(); //重置缓存
        return false;
    }
    // 数据分段,只要接收数据就会触发data事件, chuck  每次接收的数据片段
    let rawData = '';
    res.on('data', (chuck) => {
            console.log("----");
            rawData += chuck.toString('utf8');

        })
        // 数据流传输完毕
    res.on('end', (chuck) => {
        console.log("数据传输完毕")
            // 将请求的数据保存到本地
        fs.writeFileSync('./bibi.html', rawData);
        // 通过cheerio分析
        let $ = cheerio.load(rawData); //将请求的网页进行转化
        $('img').each((index, el) => {
            console.log($(el).attr('src'))
        })
    })
}).on('error', (err) => {
    console.log(err)
})
爬取效果图:

![在这里插入图片描述](https://img-blog.csdnimg.cn/0a765eea2bd848b0b6806e49830b8850.png)

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

你的美,让我痴迷

你的好,我会永远记住你的。

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值