基于node下的一个简单的小爬虫

最近一段时间在学习node.js，根据教程写了个简单的小爬虫，在这里给大家分享一下！

var https = require('https')
var cheerio = require('cheerio')
var url = 'https://www.lagou.com/'

function filiterMenu(html) {
  var $ = cheerio.load(html)
  var menu = $('.menu_main')
  var menuData = []
  menu.each(function(index, value){
    var menuTitle = $(value).find('h2').text()
    var menuLists = $(value).find('a')
    var menuList = []
    menuLists.each(function(index, value){
      menuList.push($(value).text())
    })
    menuData.push({
      menuTitle: menuTitle,
      menuList: menuList
    })
  })
  return menuData;
}

function printMenu(menu) {
  menu.forEach(function(value){
    console.log(value.menuTitle + '\n');
    value.menuList.forEach(function(value){
      console.log(value);
    })
  })
  console.log(menu);
}

https.get(url, function(res){
  var html = ''
  res.on('data',function(data){
    html += data
  })
  res.on('end', function(){
    // console.log(html);
    var result = filiterMenu(html)
    printMenu(result)
  })
  res.on('error', function(err){
    console.log(err);
  })
})