Cloudflare memperkenalkan fitur Pay Per Crawl untuk memungkinkan pemilik konten mengenakan biaya pada crawler AI untuk mengakses materi mereka.
Pemilik domain dapat memilih tiga opsi untuk setiap crawler: izinkan akses gratis, kenakan biaya sesuai tarif domain, atau blokir akses sepenuhnya.
Integrasi fitur ini memanfaatkan HTTP status code 402 Payment Required dan mekanisme otentikasi Web Bot Auth dengan HTTP Message Signatures.
Permintaan crawler dapat mengikuti alur reaktif (menerima 402 dulu lalu membayar) atau alur proaktif (menyertakan niat bayar di awal) untuk mendapatkan konten.
Cloudflare berperan sebagai Merchant of Record: mencatat setiap peristiwa crawl berbayar, menagih crawler, dan mendistribusikan pendapatan ke penerbit.
Fitur Pay Per Crawl saat ini masih dalam private beta dan dirancang untuk memberi kontrol programatik kepada pembuat konten.
Cloudflare menegakkan kebijakan lewat rules engine yang bekerja setelah kebijakan WAF dan manajemen bot diterapkan.
Get notified when new stories are published for "🇮🇩 Hacker News Bahasa Indonesia"