Firecrawl MCP Server:具备网页抓取、爬取、搜索、内容提取等多种功能

Firecrawl MCP Server是什么?

Firecrawl MCP Server是一个与 Firecrawl 集成的MCP服务器,具备网页抓取、爬取、搜索、内容提取等功能,比如说从购物网站提取商品价格,以及做深度研究等。支持云环境和自托管实例,可通过环境变量配置重试机制、信用监控等参数,提供多种ai工具及详细日志与错误处理,且方便在不同开发环境中安装使用。

Firecrawl MCP Server:具备网页抓取、爬取、搜索、内容提取等多种功能.webp

firecrawl-mcp-server功能特性

  • 多样化的网页处理:支持网页抓取、爬取、搜索、内容提取、深度研究以及批量抓取。

  • JS 渲染支持:可以处理需要 JavaScript 渲染的网页。

  • URL 发现与爬取:能够自动发现和爬取网页中的 URL。

  • 网页搜索与内容提取:支持在网页上进行搜索并提取相关内容。

  • 自动重试机制:采用指数退避算法进行自动重试,确保数据获取的稳定性。

  • 高效的批量处理:内置速率限制,提高批量处理的效率。

  • 信用使用监控:对云 API 的信用使用情况进行监控。

  • 全面的日志系统:提供详细的日志记录,方便调试和监控。

  • 多环境支持:支持云环境和自托管的 Firecrawl 实例。

  • 多视图支持:支持移动和桌面视口。

  • 智能内容过滤:可以通过标签包含或排除进行智能内容过滤。

  • SSE 支持:支持服务器发送事件(Server-Sent Events)。

firecrawl-mcp-server安装与运行

使用 npx 运行

env FIRECRAWL_API_KEY=fc-YOUR_API_KEY npx -y firecrawl-mcp

手动安装

npm install -g firecrawl-mcp

在 Cursor 中运行

根据 Cursor 的不同版本,按照相应的步骤进行配置,需要在配置中替换 your-api-key 为你的 Firecrawl API 密钥。

在 Windsurf 中运行

将特定的配置添加到 ./codeium/windsurf/model_config.json 文件中,并替换 YOUR_API_KEY 为你的 Firecrawl API 密钥。

项目链接

https://github.com/mendableai/firecrawl-mcp-server

收藏
最新工具
ClonBrowser
ClonBrowser

一款主打多账号隔离、反指纹和自动化的桌面与网页端指纹浏览器,常用...

Lightyear.fm
Lightyear.fm

一个既有趣又有教育意义的网站。Lightyear模拟了无线电波以...

MovieGame
MovieGame

一个电影爱好者做的个人网站,玩家通过看电影截图来猜电影片名,网站...

汉兜
汉兜

一款汉字版的Wordle游戏,基于流行的英文猜词游戏Wordle...

Gempix2 AI
Gempix2 AI

一款集生成和编辑图像于一体的的AI图像生成工具,提供包括文本转图...

极像素
极像素

一个展示和探索超高像素全景图像的在线平台,能提供全球各地超高分辨...

Krunker.io
Krunker.io

一款免费的在线多人第一人称射击游戏,直接在网页就能玩。游戏玩法多...

转换云
转换云

一个在线音乐格式转换网站,包括.ncm、.mgg、.mflac、...

萝卜工坊
萝卜工坊

一个能把电子文本变成逼真手写风格的在线工具。它有AI专属字体制作...

LyricsPoster
LyricsPoster

一个帮你把喜欢的歌手图片和歌词做成海报的在线工具。你可以在简单的...