第 1 步
安装
只需一条配置项,即可将 CrawlForge MCP server 添加到您的 AI 客户端。
npx -y crawlforge-mcp-serverMCP server · 31 个工具 · 开源
一个 API 搞定抓取、搜索与提取——31 个 MCP 原生工具,可直接接入 Claude、Cursor、LangChain 或您自己的代码。一次调用即可从任意 URL 获取干净的 markdown 或结构化 JSON。
31
专业工具
1,000
起步免费 credits
开源
npm 与 GitHub 上的 MCP server
1,000 免费 credits • 无需信用卡
阅读 https://www.crawlforge.dev/agent-onboarding/SKILL.md,并按其中的步骤为我设置 CrawlForge。01熔炉
网络上的每个页面都是原矿。CrawlForge 就是那座熔炉:31 个 MCP 工具负责抓取、渲染、搜索和提取,再把干净的 Markdown 或带类型的 JSON 交给你的 AI Agent。
02流程
三步即可让实时网页数据接入您的 AI Agent。
第 1 步
只需一条配置项,即可将 CrawlForge MCP server 添加到您的 AI 客户端。
npx -y crawlforge-mcp-server第 2 步
设置您的 API 密钥,并选择要为工作流启用的工具。
export CRAWLFORGE_API_KEY=cf_live_••••••••第 3 步
直接从您的 AI Agent 调用 31 个工具中的任意一个,数据即时返回。
scrape({ url: "https://example.com" }) // → markdown03铁砧上
将 CrawlForge 添加到您的 MCP 客户端配置中,立即开始调用工具。
04武器库
31 个真实的 MCP 工具,采用透明的按 credits 计费。从简单提取到深度多源研究,应有尽有。
提取并分类页面中的所有链接
提取标题、描述、OG 标签和结构化数据
从网页中提取干净的纯文本
从任意 URL 获取原始 HTML 或渲染后的内容
检索 batch_scrape 任务的分页结果
发现可用于 AI 提取的本地 Ollama 模型。
读回截断返回的结果——按句柄切片、搜索、按行翻阅或读取 json_path
为 GitHub、Amazon、LinkedIn 等 10 个平台提供的预置抓取器。
获取干净、AI 就绪的 markdown 或文本内容
读取页面内嵌 JavaScript 状态中的数据(Next.js、Nuxt、Redux)
跨语言检测并提取内容
发现并映射网站上的所有页面
处理 PDF、DOC 及其他文档格式
统一的多格式抓取——一次请求即可获取 markdown、HTML、链接、元数据等
按自定义 schema 定义提取数据
分析可读性、主题和情感倾向
在多次调用之间保持同一个浏览器页面存活——open、snapshot 取元素 ref、act、read、close
由 LLM 驱动的 schema 提取,并支持选择器兜底
默认使用本地 Ollama 进行 AI 提取——无需单独的 LLM 提供商密钥
通过基线、计划任务和告警跟踪页面变更
沿内部链接抓取整个网站
为网页内容生成简洁摘要
并行处理数百个 URL
为 AI 爬虫生成符合标准的 llms.txt
通过社区存档搜索 Reddit 帖子、评论或完整讨论串
抓取需要点击、滚动或填表的页面
搜索实时网络,以 JSON 获取排序结果
查看某域名针对某个关键词在 Google 自然搜索结果中的排名
使用住宅代理绕过反爬保护
根据自然语言提示自主研究——无需提供 URL
支持冲突检测的多源研究
05生产环境实践
从 AI Agent 流水线到竞争情报,看看各团队如何使用 CrawlForge。
06与你的技术栈无缝协作
与您的团队已在使用的工具和框架无缝协作。
npm 每周下载量
31 个工具
满足各类抓取需求的专业 MCP 工具
1,000 个免费 credits
免费开始,1,000 credits,无需信用卡
MCP 原生
一流的 Model Context Protocol 集成
credits 可结转
付费套餐中未用的 credits 永不过期
07价格
从 1,000 个免费 credits 开始,无需信用卡。用量增长后再升级。
年付套餐免费赠送两个月,并在首日即发放全年 credits。
适合试用 CrawlForge MCP
1,000 credits 起步
非常适合个人项目和小型应用
按年计费 US$190/年 · 省 US$38
60,000 credits/年
非常适合成长型企业和生产应用
按年计费 US$990/年 · 省 US$198
1,200,000 credits/年
面向高用量需求的企业级应用
按年计费 US$3,990/年 · 省 US$798
6,000,000 credits/年
credits 如何消耗
1 个 credit
抓取或提取页面
2–4 个 credits
整页抓取或深度爬取
5–10 个 credits
搜索、智能体与深度研究
订阅有效期间,付费方案未使用的 credits 可结转。Free 方案的 1,000 credits 仅发放一次。
随时开始
立即在 Playground 中测试任意工具,或创建免费账户获取 1,000 credits——无需信用卡。
1,000 免费 credits • 一次性 • 随时取消