El problema
Migrar contenido desde plataformas CMS heredadas implica extraer miles de páginas conservando la estructura, los metadatos y el formato. El copiar y pegar manual es propenso a errores y dolorosamente lento.
Casos de uso
01Respuesta rápida
Usa crawl_deep (4 credits) de CrawlForge para recorrer un sitio heredado completo siguiendo los enlaces internos, y luego extract_text (1 credit por página) para extraer contenido limpio y legible, sin navegación ni anuncios. Una sola ejecución automatizada migra cientos de páginas conservando la estructura y los metadatos, y puedes volver a ejecutarla cuando quieras.
02El planteamiento
Migrar contenido desde plataformas CMS heredadas implica extraer miles de páginas conservando la estructura, los metadatos y el formato. El copiar y pegar manual es propenso a errores y dolorosamente lento.
crawl_deep de CrawlForge recorre sitios completos siguiendo los enlaces internos, mientras que extract_text obtiene contenido limpio de cada página. Migra cientos de páginas en una sola ejecución automatizada.
03En código
1// Crawl legacy site and extract all content for migration2const crawl = await mcp.crawl_deep({3 url: "https://legacy-site.com/blog",4 max_depth: 3,5 follow_links: true,6 include_patterns: ["/blog/*"],7});8 9// Extract clean text from each discovered page10const pages = await Promise.all(11 crawl.urls.map(url =>12 mcp.extract_text({ url, preserve_structure: true })13 )14);15 16console.log(`Migrated ${pages.length} pages`);04El pipeline
05Preguntas
04
Usa crawl_deep de CrawlForge para recorrer todo el sitio siguiendo enlaces internos, y extract_text para extraer contenido limpio y legible de cada página. Una sola ejecución automatizada puede migrar cientos de páginas conservando la estructura y los metadatos.
crawl_deep devuelve el contenido de cada página, y puedes combinarlo con extract_metadata para conservar títulos, descripciones y canonicals. extract_text y extract_content eliminan el texto repetitivo para que migres el contenido real, no la navegación y los anuncios.
crawl_deep sigue los enlaces internos por todo un sitio o sección con los límites de profundidad y de páginas que tú definas, así que de cientos a miles de páginas en un solo trabajo. El costo es de 4 credits por llamada de crawl más la extracción por página.
crawl_deep cuesta 4 credits y extract_text cuesta 1 credit por página. Migrar unos cientos de páginas suele costar unos cientos de credits: una fracción del tiempo de copiar y pegar manualmente, y repetible si necesitas volver a ejecutarla.
06Sigue explorando
Audita tu sitio y el de la competencia en busca de metadatos, enlaces rotos, brechas de contenido y oportunidades de posicionamiento. Devuelve un informe estructurado de cada página rastreada.
Recopila y estructura datos web a gran escala para el ajuste fino y entrenamiento de modelos de IA. Rastrea sitios y exporta texto limpio listo para entrenar.
Empieza a forjar
Cada cuenta nueva recibe 1,000 credits gratis. No se requiere tarjeta de crédito.