跳到正文
CrawlForge MCP

模板

将已知的 URL 列表交给 batch_scrape，把结果转换为干净的训练文本。自动剔除导航与模板噪声，让每份文档都可直接用于微调。
AI 与 LLM中级

01配置

MCP 配置

ai-training-data-collector.json
{  "tools": [    {      "name": "batch_scrape",      "params": {        "urls": [          "https://docs.example.com/page-1",          "https://docs.example.com/page-2"        ],        "format": "markdown"      }    },    {      "name": "extract_content",      "params": {        "format": "text",        "remove_navigation": true      }    }  ]}

标签

  • #AI
  • #training-data
  • #machine-learning
  • #datasets

02运行流程

工作原理

7◆ credits
预计总计：每次运行约 7 credits
  1. 01batch_scrape 5 credits
  2. 02extract_content 2 credits

03继续探索

相关模板

AI 与 LLM中级

文档知识库

抓取文档站点并构建结构化知识库，用于 AI 驱动的检索。输出干净的 Markdown 分块，可直接用于 RAG 与向量嵌入。

crawl_deep 4 creditsextract_content 2 creditssummarize_content 4 credits

总计：每次运行约 10 credits

开始锻造

准备好使用这个模板了吗？

每个新账户都可获得 1,000 个免费 credits。无需信用卡。

免费开始，领取 1,000 个 credits