AIクローラー課金機能の導入

CloudflareはHTTPステータスコード402を活用した「Pay per crawl」機能をプライベートベータで公開し、コンテンツ所有者がAIクローラーへのアクセスに課金可能にした。

ドメイン所有者はクローラーごとに「Allow」「Charge」「Block」の3つのアクセス制御を設定でき、特定のクローラーを無料許可したり将来の課金交渉の余地を残したりできる。

クローラーはWeb Bot Authを用いたEd25519キー署名付きリクエストヘッダーを送信し、HTTP402/200と専用ヘッダーで支払い意思と課金処理をリアクティブ／プロアクティブに行う。

Cloudflareがマーチャントオブレコードとして決済代行を担当し、請求イベントを集約してクローラーから課金し、収益をコンテンツ所有者に分配する。

将来的には動的価格やライセンスの細分化、エージェント間のプログラム的交渉など多様な市場発展を見据えている。