nodejs结合cheerio 写简易的爬虫爬百度新闻==

cheerio   封装了很多的方法,让前端可以用类似的jq的语句来操作数据

第一步:安装cheerio。

        https://www.npmjs.com/package/cheerio

        用npm安装    npm install cheerio

第二步:引入

        const cheerio = require('cheerio');


第三步:使用

        const $ = chreeio.load("<ul id="fruits">.......</ul>");

       $('title').html();

        $('.class p').html();

        $('.class p').attr('href');


var http=require('http');
const Promise = require("promise");
const cheerio = require('cheerio');

var url='http://news.baidu.com/';
http.get(url,function(response){

    var str='';
    response.on('data',function(chunk){
        str+=chunk
    });

    response.on('end',function(){
        //console.log(str);  decodeEntities: false解析中文编码
        const $ = cheerio.load(str,{decodeEntities: false});
        //console.log($('.hotnews').html());
        var arr=[];
        $('.hotnews li a').each(function(key,value){
            console.log($(this).html())
            arr.push({
                title:$(this).html(),
                url:$(this).attr('href'),
            })
        })
        console.log(arr);
    });
})

就这么多了,我就是瞎写的一个东西记录一下

    



评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值