Masalahnya
Memindahkan kandungan daripada platform CMS lama bermakna mengekstrak ribuan halaman sambil mengekalkan struktur, metadata, dan pemformatan. Salin-tampal manual mudah ralat dan amat perlahan.
Kes Penggunaan
01Jawapan Pantas
Gunakan CrawlForge crawl_deep (4 credits) untuk meredah keseluruhan laman lama dengan mengikuti pautan dalaman, kemudian extract_text (1 credit setiap halaman) untuk menarik kandungan yang bersih dan mudah dibaca tanpa navigasi dan iklan. Satu larian automatik memindahkan ratusan halaman sambil mengekalkan struktur dan metadata, dan anda boleh menjalankannya semula pada bila-bila masa.
02Ringkasan
Memindahkan kandungan daripada platform CMS lama bermakna mengekstrak ribuan halaman sambil mengekalkan struktur, metadata, dan pemformatan. Salin-tampal manual mudah ralat dan amat perlahan.
crawl_deep CrawlForge merentasi seluruh laman dengan mengikuti pautan dalaman, manakala extract_text menarik kandungan bersih daripada setiap halaman. Pindahkan ratusan halaman dalam satu larian automatik.
03Dalam kod
1// Crawl legacy site and extract all content for migration2const crawl = await mcp.crawl_deep({3 url: "https://legacy-site.com/blog",4 max_depth: 3,5 follow_links: true,6 include_patterns: ["/blog/*"],7});8 9// Extract clean text from each discovered page10const pages = await Promise.all(11 crawl.urls.map(url =>12 mcp.extract_text({ url, preserve_structure: true })13 )14);15 16console.log(`Migrated ${pages.length} pages`);04Saluran paip
05Soalan
04
Gunakan crawl_deep CrawlForge untuk merentasi keseluruhan tapak dengan mengikuti pautan dalaman, dan extract_text untuk menarik kandungan yang bersih dan mudah dibaca daripada setiap halaman. Satu larian automatik boleh memindahkan ratusan halaman sambil mengekalkan struktur dan metadata.
crawl_deep memulangkan kandungan setiap halaman, dan anda boleh menggandingkannya dengan extract_metadata untuk mengekalkan tajuk, penerangan, dan kanonikal. extract_text dan extract_content membuang boilerplate supaya anda memindahkan kandungan sebenar, bukan navigasi dan iklan.
crawl_deep mengikuti pautan dalaman merentasi keseluruhan tapak atau bahagian dengan had kedalaman dan halaman yang anda tetapkan, jadi ratusan hingga ribuan halaman dalam satu kerja. Kosnya ialah 4 credits setiap panggilan crawl ditambah pengekstrakan bagi setiap halaman.
crawl_deep ialah 4 credits dan extract_text ialah 1 credit setiap halaman. Memindahkan beberapa ratus halaman biasanya berkos beberapa ratus credits — sebahagian kecil daripada masa salin-tampal manual, dan boleh diulang jika anda perlu menjalankannya semula.
06Teruskan meneroka
Audit laman anda dan pesaing untuk metadata, pautan rosak, jurang kandungan, dan peluang kedudukan. Memulangkan laporan berstruktur bagi setiap halaman yang dirangkak.
Kumpul dan susun set data web berskala besar untuk penalaan halus dan latihan model AI. Rangkak tapak penuh, ekstrak teks bersih dan eksport data latihan.
Mula menempa
Setiap akaun baharu mendapat 1,000 credits percuma. Tiada kad kredit diperlukan.