2025年7月6日
概要
Cloudflareの新しい有料クローラー機能は、AIクローラーをブロックし、パブリッシャーがアクセスに課金することを可能にし、コンテンツの可視性と収益化をめぐるSEO業界の議論を巻き起こしている。
要約
- Cloudflareは現在、新規ドメインに対して初期設定でAIクローラーをブロックする事に。
- パブリッシャーは、アクセスを許可するか、リクエストごとに課金するか、クローラーを完全にブロックすることができる。
- この仕組みについては、公正な対価を得るための一歩と考える人もいれば、可視性の問題やクライアントの混乱を警告する人ももちろん多くいて、どち姿勢をとるのか楽しみですね。
Cloudflareの新しい「ペイ・パー・クロール」イニシアチブは、SEO専門家やデジタルマーケティング担当者の間で議論を巻き起こしている。（公式アナウンス全文英文）
同社は、パブリッシャー向けの新たな収益化オプションとともに、デフォルトのAIクローラーブロックシステムを導入したともアナウンス。
これにより、パブリッシャーはAI企業にアクセス料を請求できるようになり、ジェネレーティブ検索の時代においてウェブコンテンツがどのように消費され、評価されるかに影響を与える可能性がある事も示唆しています。
クラウドフレア（Cloudflare）の新しいデフォルト： AIクローラーをブロックとは？
現在プライベートベータ版として提供されているこのシステムでは、Cloudflareの新規ドメインに対し、既知のAIクローラーがデフォルトでブロックされます。
パブリッシャーは、クローラーごとに3つのアクセス設定から1つを選択できる：
許可 – 無制限のアクセスを許可する
課金 – 設定されたドメイン全体の価格での支払いを要求する
ブロック – アクセスを完全に拒否する
ブロックされたコンテンツにアクセスしようとするクローラーは、402 Payment Required レスポンスを受け取ります。パブリッシャはリクエストごとにサイト全体で一律の価格を設定し、Cloudflareが課金と収益分配を行うとの事。
長々とよくわからない内容をまぜているが、クラウドフレア（Cloudflare）今後の展望は？
Cloudflareのペイパークロールシステムは、誰がどのようなコストでウェブコンテンツにアクセスできるかをめぐる新たな交渉のレイヤーを公式化する予定。
SEOのプロにとって、これは当然ですが複雑さを増すことになり、知名度はランキングだけでなく、クローラーのアクセス設定、支払いポリシー、ボットの認証にも左右されるようになるかもしれない。
これがパブリッシャーに力を与えるという見方がある一方で、コンテンツへのアクセスがインフラやペイウォールによって異なるオープンウェブを分断する可能性があると警告する人ももちろん出てきています。
ジェネレーティブAIが人々の検索方法の中核となり、そのAIを供給するパイプが必要不可欠なライフラインとなった場合、ウェブサイトは、システム、ポリシー、財務モデルのパッチワークが増えていく中、可視性を管理する必要は水道や電気、ガスといった資源と同じ扱いになる可能性が出てきていましが、まだ確実にどこ方法性に進むかは決まっていないため、静観しつつ、近い将来は全てサブスクにするか、クローズドにするか・・・どの選択肢を選ぶか注目です。