Kes Penggunaan
01Jawapan Pantas
Gunakan CrawlForge stealth_mode (5 credits) untuk memaparkan dalam pelayar sebenar dengan cap jari rawak melepasi had kadar dan pengesanan bot, kemudian scrape_structured (2 credits) untuk memetakan pemilih kepada JSON bertaip -- nama produk, harga, spesifikasi. Anda memantau halaman pesaing yang dilindungi mengikut jadual tanpa menjalankan infrastruktur pelayar anda sendiri.
02Ringkasan
Laman web pesaing secara aktif menyekat penyapu dengan CAPTCHA, pengehadan kadar, dan pengesanan bot. Mendapatkan data berstruktur yang boleh dipercayai daripada laman yang dilindungi memerlukan infrastruktur proksi yang mahal dan penyelenggaraan berterusan.
stealth_mode CrawlForge memaparkan dalam pelayar sebenar dengan putaran cap jari untuk melepasi sistem anti-bot yang biasa. Gandingkan ia dengan scrape_structured untuk pengekstrakan data berasaskan skema yang bersih.
03Dalam kod
1// Gather competitor data through anti-bot protections2const page = await mcp.stealth_mode({3 url: "https://competitor.com/pricing",4 stealthConfig: { level: "advanced", randomizeFingerprint: true },5});6 7// Extract structured pricing data8const pricing = await mcp.scrape_structured({9 url: "https://competitor.com/pricing",10 schema: {11 plans: [{12 name: "string",13 price: "string",14 features: ["string"],15 }],16 },17});18 19console.log(pricing.plans);04Saluran paip
05Soalan
04
Gunakan stealth_mode CrawlForge, yang memaparkan dalam pelayar sebenar dan merawakkan cap jari untuk melepasi had kadar dan pengesanan bot. Gabungkannya dengan scrape_structured untuk memulangkan data berasaskan skema yang bersih daripada halaman yang dilindungi.
Ya. stealth_mode mengendalikan pelayar dan pengecapan jari untuk anda serta berputar antara proksi yang anda bekalkan, jadi anda boleh memantau halaman pesaing yang dilindungi mengikut jadual tanpa menjalankan infrastruktur pelayar anda sendiri. Gandingkannya dengan track_changes untuk memerhati pelancaran atau perubahan harga.
stealth_mode ialah 5 credits setiap permintaan kerana ia menjalankan pelayar penuh dengan putaran proksi dan cap jari. Simpankan ia untuk tapak yang benar-benar menyekat pengambilan standard, dan gunakan alat yang lebih murah seperti fetch_url pada 1 credit untuk halaman terbuka.
Ya. scrape_structured pada 2 credits memetakan pemilih CSS kepada medan supaya anda mendapat JSON bertaip — nama produk, harga, spesifikasi — bukannya HTML mentah. Untuk pengekstrakan dipacu AI tanpa pemilih, gunakan extract_structured pada 3 credits.
06Teruskan meneroka
Jejaki harga pesaing dan ketersediaan produk merentas ratusan laman e-dagang. Kesan harga yang dipotong pada hari ia berlaku dan tetapkan semula harga dengan yakin.
Perkayakan prospek jualan dengan data syarikat, tumpukan teknologi dan maklumat hubungan daripada web. Menukar senarai domain kosong menjadi saluran jualan yang layak.
Mula menempa
Setiap akaun baharu mendapat 1,000 credits percuma. Tiada kad kredit diperlukan.