欢迎使用 CrawlForge

我们很高兴推出 CrawlForge MCP——一个专为 AI 工程师和构建智能应用的开发者设计的全面 web scraping 平台。

我们为什么打造 CrawlForge

现代 AI 应用需要来自网络的可靠结构化数据。无论你是在构建 RAG 系统、训练模型，还是创建智能 agent，网页数据都不可或缺。但传统的 scraping 工具复杂、不可靠，而且并非为 AI 工作流设计。

CrawlForge 改变了这一点。

CrawlForge 的与众不同之处

26 个专用工具

我们为不同的 scraping 场景打造了 26 个专用工具：

• 基础工具：fetch_url、extract_text、extract_links、extract_metadata
• 提取工具：scrape_structured、extract_content、map_site、process_document
• 高级工具：search_web、crawl_deep、batch_scrape、deep_research
• 以及更多：stealth_mode、localization、analyze_content、summarize_content

基于 credits 的定价

只为你使用的部分付费。每个工具根据复杂度收取 1 至 10 credits：

• 简单抓取：1 credit
• 结构化 scraping：2 credits
• 浏览器自动化：5 credits
• 深度研究：10 credits

新账户即享 1,000 个免费 credits，无需信用卡。

为开发者打造

• RESTful API：简单的 HTTP 请求，无需 SDK
• 完善的文档：cURL、TypeScript、Python 的清晰示例
• 慷慨的速率限制：从原型到生产环境自由扩展
• 实时分析：跟踪用量并优化成本

快速上手

1. 在 crawlforge.dev 注册一个免费账户
2. 在你的控制台中创建一个 API key
3. 发起你的第一个请求：

curl -X POST https://crawlforge.dev/api/v1/tools/fetch_url \
  -H "Authorization: Bearer YOUR_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{"url": "https://example.com"}'

就是这么简单！你已经开始 scraping 了。

接下来是什么

我们才刚刚起步。以下是即将推出的功能：

• Webhooks：scraping 任务完成时获得通知
• 自定义工具：为你的使用场景申请专用 scraper
• 团队协作：共享 API key 并管理用量
• 高级分析：深入洞察你的 scraping 模式

加入我们

我们正在为像你一样的开发者打造 CrawlForge。我们非常希望听到你的反馈、功能请求和成功故事。

• 文档
• API 参考
• GitHub
• Twitter

祝你 scraping 愉快！

- CrawlForge 团队