Firecrawl MCP Server安装与配置指南
1. 项目基础介绍
Firecrawl MCP Server 是一个基于 Model Context Protocol (MCP) 的服务器实现,它能够与 Firecrawl 集成,提供网页抓取功能。该项目允许用户进行网页抓取、爬取、搜索、信息提取、深度研究和批量抓取等操作。它使用 JavaScript 渲染进行网页抓取,并支持云和自托管 Firecrawl 实例。
主要编程语言:TypeScript
2. 项目使用的关键技术和框架
- Node.js:运行环境,用于执行服务器端的 JavaScript 代码。
- TypeScript:JavaScript 的超集,增加了静态类型检查。
- Express:基于 Node.js 的 Web 应用框架,用于构建单页、多页或混合 Web 应用。
- MCP (Model Context Protocol):一种协议,用于在机器学习模型和应用程序之间交换数据和上下文。
3. 项目安装和配置的准备工作与详细步骤
准备工作
- 确保你的系统中已安装 Node.js 和 npm(Node.js 的包管理器)。
- 准备 Firecrawl API Key(如果你使用的是云 API)。
安装步骤
步骤 1:克隆项目
首先,你需要克隆项目到本地:
git clone https://github.com/mendableai/firecrawl-mcp-server.git
cd firecrawl-mcp-server
步骤 2:安装依赖
使用 npm 安装项目依赖:
npm install
步骤 3:设置环境变量
根据你的需求设置环境变量。以下是一些基本的环境变量配置示例:
export FIRECRAWL_API_KEY=your-api-key # 替换为你的 Firecrawl API Key
export FIRECRAWL_RETRY_MAX_ATTEMPTS=3
export FIRECRAWL_RETRY_INITIAL_DELAY=1000
export FIRECRAWL_RETRY_MAX_DELAY=10000
export FIRECRAWL_RETRY_BACKOFF_FACTOR=2
export FIRECRAWL_CREDIT_WARNING_THRESHOLD=1000
export FIRECRAWL_CREDIT_CRITICAL_THRESHOLD=100
如果你使用的是自托管实例,还需要设置 FIRECRAWL_API_URL
:
export FIRECRAWL_API_URL=https://firecrawl.your-domain.com
步骤 4:运行项目
运行以下命令启动服务器:
npm start
现在,Firecrawl MCP Server 应该已经运行在默认的 3000 端口上。
配置指南
- 配置文件:项目的配置可以通过环境变量进行,也可以在代码中直接修改
CONFIG
对象。 - 集成到其他应用:如果你的应用程序需要集成 Firecrawl MCP Server,请参考相应的 MCP 服务器配置指南。
以上步骤为 Firecrawl MCP Server 的基本安装和配置流程。确保在操作过程中替换所有必要的变量,以适应你的具体环境。