Firecrawl web scraping API: özellikler, fiyat ve sınırlar

Firecrawl, yapay zekâ ajanlarını, RAG sistemlerini veya otomasyonları güncel web içeriğiyle beslemek isteyen geliştiriciler için bir web verisi API’sidir. Web’de arama yapabilir, tek sayfa çekebilir, bir siteyi tarayabilir, URL’leri haritalayabilir ve temiz Markdown ya da yapılandırılmış JSON döndürebilir.

Doğru Firecrawl endpoint’ini seçmek

Bilinen bir URL için scrape, bağlantılı çok sayıda sayfa için crawl, önce adresleri keşfetmek için map kullanın. Search kaynak bulur; tarayıcı etkileşimi tıklama, form veya kaydırma sonrasında görünen veriler içindir. Resmî çıkarıcı rehberi kapsam ve tüketimi karşılaştırır.

Önce temsilî bir sayfayı deneyin, yalnızca gereken formatları isteyin; alanları, bağlantıları ve kaynak URL’yi doğrulayın. Ardından sayfa, derinlik ve eşzamanlılık sınırı koyun. Web metnini bir ajana aktarırken güvenilmeyen girdi sayın ve önemli bilgileri kaynağından kontrol edin.

Krediler, gizlilik ve sorumlu kullanım

Ücretsiz aylık kredi kotası vardır; ücretli planlar daha fazla kredi ve eşzamanlı istek sunar. Endpoint ve ek seçeneklerin tüketimi değişebilir. Üretim maliyeti hesaplamadan önce güncel fiyat tablosuna bakın.

Erişim izni, telif, kişisel veri ve hedef sitenin koşullarından kullanıcı sorumludur. Hassas içerik göndermeden önce gizlilik politikasını ve saklama seçeneklerini inceleyin. Üretimde zaman aşımı, yeniden deneme, önbellek kullanımı ve kısmen başarısız sayfaları kaydedin. Düzen değişikliklerinin alanları sessizce bozmadığını görmek için çıktının bir örneğini görünür kaynak sayfayla düzenli olarak karşılaştırın. Kaynak URL’yi sonuçla birlikte saklamak, sonradan denetimi ve düzeltmeyi kolaylaştırır. Yanıt kodlarını, boş sonuçları ve şema değişikliklerini ayrıca izleyin. Böylece entegrasyon hatasıyla kaynak sayfadaki değişikliği ayırabilir, eksik verinin kullanıcıya ulaşmasını önleyebilirsiniz. Günlük inceleyin.

Firecrawl JavaScript sitelerini çekebilir mi?

Birçok dinamik sayfayı destekler; giriş, bot engeli ve karmaşık etkileşimleri gerçek hedeflerde test etmek gerekir.

Firecrawl ücretsiz mi?

Aylık kredi sınırı olan ücretsiz katman bulunur. Güncel kota ve maliyetler resmî fiyat sayfasındadır.