Firecrawl MCP Server:具备网页抓取、爬取、搜索、内容提取等多种功能

Firecrawl MCP Server是什么?

Firecrawl MCP Server是一个与 Firecrawl 集成的MCP服务器,具备网页抓取、爬取、搜索、内容提取等功能,比如说从购物网站提取商品价格,以及做深度研究等。支持云环境和自托管实例,可通过环境变量配置重试机制、信用监控等参数,提供多种ai工具及详细日志与错误处理,且方便在不同开发环境中安装使用。

Firecrawl MCP Server:具备网页抓取、爬取、搜索、内容提取等多种功能.webp

firecrawl-mcp-server功能特性

  • 多样化的网页处理:支持网页抓取、爬取、搜索、内容提取、深度研究以及批量抓取。

  • JS 渲染支持:可以处理需要 JavaScript 渲染的网页。

  • URL 发现与爬取:能够自动发现和爬取网页中的 URL。

  • 网页搜索与内容提取:支持在网页上进行搜索并提取相关内容。

  • 自动重试机制:采用指数退避算法进行自动重试,确保数据获取的稳定性。

  • 高效的批量处理:内置速率限制,提高批量处理的效率。

  • 信用使用监控:对云 API 的信用使用情况进行监控。

  • 全面的日志系统:提供详细的日志记录,方便调试和监控。

  • 多环境支持:支持云环境和自托管的 Firecrawl 实例。

  • 多视图支持:支持移动和桌面视口。

  • 智能内容过滤:可以通过标签包含或排除进行智能内容过滤。

  • SSE 支持:支持服务器发送事件(Server-Sent Events)。

firecrawl-mcp-server安装与运行

使用 npx 运行

env FIRECRAWL_API_KEY=fc-YOUR_API_KEY npx -y firecrawl-mcp

手动安装

npm install -g firecrawl-mcp

在 Cursor 中运行

根据 Cursor 的不同版本,按照相应的步骤进行配置,需要在配置中替换 your-api-key 为你的 Firecrawl API 密钥。

在 Windsurf 中运行

将特定的配置添加到 ./codeium/windsurf/model_config.json 文件中,并替换 YOUR_API_KEY 为你的 Firecrawl API 密钥。

项目链接

https://github.com/mendableai/firecrawl-mcp-server

收藏
最新工具
Hera.Video
Hera.Video

Y Combinator支持的AI动画设计工具,能快速生成高品质...

AirPano
AirPano

一个能在线虚拟旅行的平台,提供全球各地的360° 航拍全景和沉浸...

Explore
Explore

Explore是全球知名的慈善实时自然摄像网络和纪录片频道,由非...

Krokotak
Krokotak

一个给家长和孩子用的创意手工与教育网站,里面有好多手工教程、教育...

奇多作业纸
奇多作业纸

一个免费的幼小衔接学习网站,专门给幼儿园大班孩子用,里面有数学、...

福客AI客服
福客AI客服

一个专为电商行业研发的电商智能客服系统,主要特点是全自动回复、会...

颜习生AI
颜习生AI

一个智能颜值测评平台,算法经百万级人脸数据训练,结合亚洲美学标准...

A Million Dollar Idea
A Million Dollar Idea

一个用AI帮人想商业点子的工具,这里有几百个各行各业的创业点子,...

DeepSider AI
DeepSider AI

一款浏览器侧边栏AI工具,集成了GPT、Sonnet、Claud...

店匠Shoplazza
店匠Shoplazza

专门帮中国跨境电商卖家建独立站、做运营的平台。它用 SaaS 模...