Context.dev: API web scraping untuk agen AI

Penjelasan sederhana: Context.dev digunakan untuk apa?

Context.dev adalah API web scraping. Aplikasi mengirim alamat halaman, lalu menerima konten yang bisa diproses, seperti Markdown, HTML yang sudah dirender, tangkapan layar atau kolom data terstruktur. Layanan mengelola browser dan infrastruktur proxy. Markdown mempertahankan judul serta daftar dalam teks yang mudah dibaca, cocok untuk memasok bahan ke model AI.

Layanan ini dioperasikan Context Dev Inc. untuk pengembang agen AI, alat riset dan alur RAG. Dalam RAG, aplikasi mengambil sumber yang relevan sebelum membuat jawaban. Context.dev menyediakan data web; penyimpanan, pengindeksan dan penyajian hasil tetap ditangani aplikasi Anda.

API terkelola dan alur pengumpulan data

Scrape membaca URL yang sudah diketahui dan dapat menghasilkan beberapa format sekaligus. Gunakan Markdown untuk teks, HTML untuk struktur halaman, screenshot untuk catatan visual, atau ekstraksi JSON dengan JSON Schema untuk kolom tertentu. Rendering JavaScript dan proxy termasuk dalam harga dasar, tetapi opsi tambahan dapat meningkatkan konsumsi kredit.

Map menemukan URL dalam situs. Pilih jalur yang dibutuhkan, lalu gunakan Crawl untuk mengikuti tautan dan menerima hingga 500 halaman Markdown per panggilan. Batasi jumlah halaman, kedalaman dan jalur. Batches menangani daftar atau situs lebih besar secara asinkron, dengan polling status atau webhook.

Sebelum memasukkan hasil ke indeks RAG sendiri, periksa beberapa halaman contoh dan simpan URL sumber. Scrape secara default dapat memakai keluaran cache hingga tiga hari. Atur maxAgeMs: 0 ketika perlu mengambil salinan baru.

Memulai lewat API atau MCP

1. Buat akun dan simpan kunci API rahasia di server.
2. Ikuti panduan awal resmi dengan cURL atau SDK TypeScript, Python, Ruby, Go maupun PHP.
3. Kirim POST ke https://api.context.dev/v1/web/scrape dengan autentikasi Bearer, url dan formats: { "markdown": true }. Anda dapat memakai sharedParams.mainContentOnly untuk fokus pada isi utama.
4. Periksa markdown.success sebelum membaca markdown.data. HTTP 200 masih dapat memuat keluaran tertentu yang gagal.
5. Perluas pengumpulan sesudah memastikan mutu contoh nyata.

Panduan MCP menjelaskan koneksi klien yang sesuai ke https://mcp.context.dev/mcp melalui OAuth. Panggilan menggunakan kredit organisasi yang terhubung.

Pencarian, riset dan pemantauan perubahan

Search menerima kueri dan menghasilkan URL berperingkat, judul serta deskripsi, dengan pilihan Markdown. Answers menerima tugas riset dan contoh objek JSON, lalu memberikan temuan terstruktur beserta sumbernya. Periksa halaman asli untuk informasi yang berpengaruh pada keputusan.

Monitors membuat acuan awal dan membandingkan pemeriksaan terjadwal atas halaman, sitemap atau konten pilihan. Deteksi dapat berupa perbedaan teks atau perubahan relevan menurut instruksi. Pastikan proses acuan selesai, validasi tanda tangan webhook dan periksa proses gagal. Pengambilan acuan pertama tidak mengirim pemberitahuan perubahan.

Brand menyediakan informasi perusahaan, logo dan warna dari domain. Styleguide menambahkan tipografi, jarak dan gaya komponen untuk personalisasi alur awal penggunaan produk.

Kredit gratis dan biaya dalam dolar

Diperiksa pada 15 Oktober 2026: Free menyediakan 1.000 kredit API per bulan tanpa kartu. Harga publik bulanan dalam USD adalah Developer 19, Pro 99, Growth 299 dan Scale 499. Kuota kredit bulanannya masing-masing 7.500, 125.000, 500.000 dan 1.000.000. Enterprise memakai penawaran khusus. Lihat harga saat ini untuk pembayaran tahunan dan ketentuan pembelian; angka tersebut bukan harga rupiah.

Scrape standar mulai dari satu kredit; tindakan browser membuat biaya dasar menjadi dua. Ekstraksi JSON yang berhasil menambah empat. Logo Link memiliki kuota terpisah, termasuk 10.000 permintaan sekali saja untuk Free. Keberhasilan sebagian dan halaman tujuan 404 dapat dikenai biaya.

Auto-Topup dapat menambahkan blok berbayar jika diaktifkan. Peringatan pengeluaran bukan batas biaya keras. Periksa batas laju dan konkurensi akun Anda di dasbor, terutama untuk paket lama atau khusus.

Privasi dan hak penggunaan konten

Kebijakan privasi mengizinkan penggunaan kueri dan hasil untuk meningkatkan layanan dan melatih model, sesuai perjanjian serta pembatasan yang berlaku. Permintaan biasa tidak otomatis memiliki retensi nol.

ZDR memerlukan hak organisasi dan pengaturan eksplisit pada panggilan yang didukung. Pastikan X-Context-ZDR: true. Batches, Monitors dan Brand retrieval tidak mendukung mode ini; PDF OCR dilewati saat ZDR. Anda tetap mengelola log dan penyimpanan sendiri. Akses API tidak memberi lisensi untuk menerbitkan ulang halaman atau logo pihak ketiga.

Pertanyaan umum

Apa bedanya dengan memakai proxy sendiri?

API terkelola menangani browser dan proxy serta mengembalikan format yang diminta. Dengan proxy saja, aplikasi Anda masih perlu menangani pengambilan dan pemrosesan halaman.

Apakah saya harus bisa coding?

Ini adalah layanan API untuk integrasi aplikasi. SDK dan contoh resmi membantu pengembang; klien AI yang mendukung MCP juga dapat terhubung melalui OAuth.

Apakah ada pilihan gratis?

Ada 1.000 kredit API setiap bulan di Free. Jumlah halaman bergantung pada operasi dan opsi yang dipakai.

Bolehkah hasilnya digunakan ulang tanpa batas?

Tidak otomatis. Hak akses, penyimpanan dan penggunaan ulang materi pihak ketiga harus diperiksa terpisah.

Sumber resmi

• Dokumentasi SDK: pustaka dan persyaratan.
• Status layanan: memeriksa ketersediaan.
• Kontak: dukungan dan urusan bisnis.
• Akun X resmi: pengumuman produk.