能力
网页抓取
网页抓取：图谱里有 14 个 AI 工具能做，包括 Crawl4AI、Firecrawl、Fetch MCP Server、Firecrawl MCP Server、ScrapeGraphAI。
批量抓取网页，转成干净的文本或数据。
输入 网页 → 输出 文本 · 结构化数据
这是 https://godooo.ai/zh/capability/web-scraping 的 Markdown 版本。本站每个页面都有：在地址后面加 .md。
能做的工具 · 14
| 工具 | 程度 | 价格 | 是否开源 | 使用方式 |
|---|---|---|---|---|
| Crawl4AI框架 | 主打 * | 是 | 可自部署 · 可离线本地运行 · 命令行 · API | |
| Firecrawl产品 | 主打 * | 开源免费 | 是 | API · 可自部署 · 命令行 |
| Fetch MCP ServerMCP 服务器 | 主打 * | 是 | 手机 · 可自部署 · 可离线本地运行 · API | |
| Firecrawl MCP ServerMCP 服务器 | 主打 * | 是 | API · 可自部署 · 命令行 | |
| ScrapeGraphAI框架 | 主打 * | 是 | 可自部署 · API · 可离线本地运行 | |
| Jina Reader产品 | 主打 * | 开源免费 | 是 | API · 可自部署 |
| Apify MCP ServerMCP 服务器 | 主打 * | 是 | API · 命令行 · 可自部署 | |
| Browser Use框架 | 支持 * | 是 | 命令行 · API · 可自部署 · 可离线本地运行 · 网页 | |
| Cloudflare MCP ServersMCP 服务器 | 支持 * | 是 | API · 可自部署 | |
| Exa MCP ServerMCP 服务器 | 支持 * | 是 | API · 可自部署 | |
| AnythingLLM产品 | 支持 * | 开源免费 | 是 | 网页 · 桌面 · 可自部署 · API · 可离线本地运行 |
| Skyvern智能体 | 支持 * | 开源免费 | 是 | 网页 · 可自部署 · API · 命令行 |
| Browserbase MCP ServerMCP 服务器 | 支持 * | API · 可自部署 · 命令行 | ||
| Tavily MCP ServerMCP 服务器 | 支持 * | 是 | API · 可自部署 · 可离线本地运行 |
* 由机器提出，尚待校准
常见问题
网页抓取 是什么？
批量抓取网页，转成干净的文本或数据。网页抓取：图谱里有 14 个 AI 工具能做，包括 Crawl4AI、Firecrawl、Fetch MCP Server、Firecrawl MCP Server、ScrapeGraphAI。
哪些工具主打「网页抓取」？
Crawl4AI、Firecrawl、Fetch MCP Server、Firecrawl MCP Server、ScrapeGraphAI、Jina Reader、Apify MCP Server。
有免费的「网页抓取」工具吗？
Crawl4AI、Firecrawl、Fetch MCP Server、Firecrawl MCP Server、ScrapeGraphAI、Jina Reader、Apify MCP Server、Browser Use。
哪些开源工具能做「网页抓取」？
Crawl4AI、Firecrawl、Fetch MCP Server、Firecrawl MCP Server、ScrapeGraphAI、Jina Reader、Apify MCP Server、Browser Use。
哪些「网页抓取」工具能离线运行？
Crawl4AI、Fetch MCP Server、ScrapeGraphAI、Browser Use、AnythingLLM、Tavily MCP Server。