jsonframe-cheerio 使用教程

最新推荐文章于 2024-09-15 08:06:31 发布

巫舒姗

最新推荐文章于 2024-09-15 08:06:31 发布

阅读量420

点赞数 4

本文链接：https://blog.csdn.net/gitblog_00387/article/details/141743567

版权

jsonframe-cheerio 使用教程

jsonframe-cheeriosimple multi-level scraper json input/output for Cheerio项目地址:https://gitcode.com/gh_mirrors/js/jsonframe-cheerio

项目介绍

jsonframe-cheerio 是一个基于 Cheerio 的简单多级抓取器，支持 JSON 输入和输出。它允许用户通过定义 JSON 格式的框架来抓取网页数据，非常适合需要从网页中提取结构化数据的场景。

项目快速启动

安装

首先，通过 npm 安装 jsonframe-cheerio：

npm install jsonframe-cheerio --save

基本使用

以下是一个简单的示例，展示如何使用 jsonframe-cheerio 抓取网页数据：

const cheerio = require('cheerio');
const jsonframe = require('jsonframe-cheerio');

// 加载 HTML
const $ = cheerio.load('<html><body><h1>I love jsonframe</h1><span itemprop="email">Email: gabin@datascraper.pro</span></body></html>');

// 初始化插件
jsonframe($);

// 定义抓取框架
const frame = {
  "title": "h1",
  "email": "span[itemprop=email]"
};

// 抓取数据
const result = $('body').scrape(frame, { string: true });

console.log(result);
// 输出: { "title": "I love jsonframe", "email": "Email: gabin@datascraper.pro" }

应用案例和最佳实践

应用案例

假设我们需要从一个包含产品列表的网页中抓取产品名称和价格，可以使用 jsonframe-cheerio 来实现：

const $ = cheerio.load('<html><body><ul><li><span class="name">Product A</span><span class="price">$10</span></li><li><span class="name">Product B</span><span class="price">$20</span></li></ul></body></html>');

jsonframe($);

const frame = {
  "products": {
    "selector": "ul li",
    "data": {
      "name": ".name",
      "price": ".price"
    }
  }
};

const result = $('body').scrape(frame, { string: true });

console.log(result);
// 输出: { "products": [ { "name": "Product A", "price": "$10" }, { "name": "Product B", "price": "$20" } ] }