AI 与 LLM中级
AI 训练数据采集器
将已知的 URL 列表交给 batch_scrape，把结果转换为干净的训练文本。自动剔除导航与模板噪声，让每份文档都可直接用于微调。
MCP 配置
{
"tools": [
{
"name": "batch_scrape",
"params": {
"urls": [
"https://docs.example.com/page-1",
"https://docs.example.com/page-2"
],
"format": "markdown"
}
},
{
"name": "extract_content",
"params": {
"format": "text",
"remove_navigation": true
}
}
]
}工作原理
1
batch_scrape
5 credits2
extract_content
2 credits预计总计：每次运行约 7 credits
标签
AItraining-datamachine-learningdatasets