crw

crw

轻量级的网页抓取、爬虫和搜索API,支持MCP服务器。

MCP搜索与研究开源
形态
MCP
传输协议
http
是否开源
是
GitHub Stars
★ 1.1k
收录来源
mcp-github

能力说明

fastCRW是一个用Rust编写的快速、轻量级的Firecrawl/Tavily替代品。它提供了一个MCP服务器,使AI代理能够进行网页抓取、爬虫和搜索。该工具兼容Firecrawl API(/scrape, /crawl, /search),并且在1K-URL基准测试中比Tavily快2.3倍,比Firecrawl快1.5倍。内存占用仅为6MB,可以自托管或使用托管云服务。

能力点

  • ▪网页抓取
  • ▪网站爬虫
  • ▪网络搜索
  • ▪结构化数据提取
  • ▪Markdown和JSON输出

适用场景

自动化数据收集内容分析市场调研竞争情报

接入方式

依赖:API Key
curl -fsSL https://fastcrw.com/install | sh

以上信息由 AI 基于公开资料整理,可能存在偏差,以来源为准。

常见问题

如何安装fastCRW?

运行curl -fsSL https://fastcrw.com/install | sh即可。

是否需要API密钥?

是的,使用托管云服务时需要API密钥。

相关 Skill