プレスリリース. 2026年9月15日

Cloudflare、検索やAIトレーニングのトレードオフを解消

このプレスリリースをご覧いただける言語： Deutsch, English, Español (España), Español (Latinoamérica), Français, Indonesia, Nederlands, Tiếng Việt, ไทย, 한국어, 繁體中文

新しい管理機能と推奨設定が本日から利用可能になり、出版社や企業は、検索、AIトレーニング、AIエージェントにおけるコンテンツの利用方法を独自に管理できるようになります。大手企業の複合用途クローラーは、すでにこれらの選択を尊重する管理機能を提供または構築しています。

コネクティビティクラウドの先端企業であるCloudflare（クラウドフレア）は本日、AIクロールに対する新たな説明責任のある指定を発表しました。これに関連して、CloudflareはDisallow AI Trainingを開始しました。この設定により、ウェブサイトが検索結果に完全に表示されたまま、AI学習に利用されるのを拒否できます。11週間前、Cloudflareは、「ウェブサイト所有者は、AIが自身のコンテンツをどのように使用するかに対して実質的な管理権を持つべきである」と述べ、クローラー運営者が継続的なアクセス権を得るために提供すべき要件を定めました。Apple、Google、およびMicrosoftは現在、「説明責任がある」として分類されており、これらの基準を満たしているか、または満たすための具体的なタイムラインを提示しています。サイト所有者がトレーニングをブロックすると、その他の複合用途クローラーがブロックされます。

約30年間、クローラーとウェブサイト所有者との間の関係は単純でした。つまり、クローラーが情報を取得し、トラフィックを送り返すというものでした。しかし、AIがその関係を変えました。検索インデックスとAIトレーニングの両方のコンテンツを収集する複合用途クローラーは、現在Cloudflareのネットワーク上で確認されたクローラートラフィックの36.6%を占めており、最大のカテゴリとなっています。ほとんどのウェブサイト所有者は依然として検索に表示されたいと考えており、検索クローラーをブロックしているのは1%未満である一方で、17%がAIトレーニングを制限しています。今日まで、トレーニングを拒否すると、適切な制御機能を持たないクローラーから検索されなくなっていました。

Cloudflareの共同創設者兼最高経営責任者（CEO）であるマシュー・プリンス（Matthew Prince）は、「私たちがインターネットをより良くする方法は、検索の価値を高めるオープン性を維持しながら、ウェブの背後にいる人々や企業が、自身の成果物の利用方法に関して有意義な管理権を行使できるようにすることです。Apple、Google、Microsoftのような企業と協力して、健全なエコシステムの構築に向けた連携を継続できることを楽しみにしています。」と述べています。

複合用途クローラーは、AIトレーニング問題で最も難しい部分でした。AI要約は以下のとおりです：Cloudflareが「説明責任がある」として指定したすべての事業者は、サイト所有者に対し、AI要約をオプトアウトできる方法を提供しなければなりません。現在、それは各事業者ごとに個別に設定される「はい」か「いいえ」の選択です。Cloudflareの目標は、来年初めまでに、サイト所有者が自身のコンテンツをどの程度含めるかを、一か所で管理できるようにすることです。

新しい管理機能、新しい推奨設定

Cloudflareは「Block AI Bots（AIボットをブロック）」スイッチを、検索用、AIトレーニング用、およびAIエージェント用の3つの独立した管理機能に置き換えます。Cloudflare上の新しいウェブサイトは、次のようなビジネスモデルに合わせた推奨設定の提案を見ることができます：

広告を掲載しているサイト： 検索クロールは有効、AIトレーニングは禁止、広告ページではAIエージェントがブロックされています。
その他のすべてのサイト： 検索、AIトレーニング、およびAIエージェントはいずれも許可されており、これは広告収入に依存していないほとんどのウェブサイトがすでに採用している運用方法と一致しています。

また、Cloudflareは「Managed Robots.txt」機能を「Bot Preference Sync」に置き換えます。これにより、サイト所有者が一度クロールの設定を行えば、対応するすべてのクローラーに自動的に適用されます。顧客はいつでも簡単に設定や好みを変更できます。

説明責任のあるAIクローリング

Cloudflareは、複合用途クローラーも含め、透明性と説明責任を備えたAIクローリングの明確な基準を確立しました。事業者は、次の4つの要件を満たすか、指定された期限内に満たすことを約束しなければなりません：

robots.txtまたはそれに相当する基準を通じて、サイト所有者がAIトレーニングをオプトアウトできる明確な方法を提供すること
サイト所有者が、AI生成の検索要約をオプトアウトできるようにすること
サイト所有者に対し、検索とトレーニング目的でコンテンツがどのように利用されているかをURL単位で可視化できるようにすること
トレーニングのオプトアウトが、従来の検索におけるサイトのランキングに影響を与えないことを公に確認すること

Apple、Google、Microsoftは、これらの基準を満たしていることを示しました。例えば、GoogleはGoogle Extendedを提供しています。これはサイトが検索機能を利用し続けながら、トレーニングのオプトアウトを可能にする制御機能です。また、今年初めには、ウェブサイト所有者が検索におけるAIをナビゲートするための新しいツールを発表しました。他の主要なAI企業は、検索とトレーニングのために独立したクローラーを運用しています。これにより、Cloudflareは検索に影響を与えることなく、トレーニングクローラーをブロックできます。そのため、Cloudflareは関連するクローラーも「説明責任がある」として分類しています。Cloudflareは、Cloudflare Radarで該当する事業者の完全なリストを公開しています。

また、Cloudflareは、Internet Engineering Task Force（IETF）でのオープン標準の取り組みにも積極的に参加しています。特に、規格「ai-prefs」は開発中のもので、どのウェブサイトでも、標準化された移植性のある方法でAIアクセスに関する設定を表明できるようにするものです。今日の管理システムは、これらの新しい規格と連携するように設計されています。

AIとコンテンツ管理に関するCloudflareのアプローチについて、詳しくは以下のリソースをご覧ください：

Cloudflareについて

Cloudflare, Inc.（NYSE：NET）はコネクティビティクラウドの先端企業で、企業が環境にかかわらず従業員、アプリケーション、ネットワークの速度と安全性を高め、簡略化とコスト削減を実現できるように支援しています。Cloudflareのコネクティビティクラウドは、クラウドネイティブな製品と開発者ツールをまとめた機能満載の統合プラットフォームで、どんな組織でもビジネスの遂行、開発、加速に必要なコントロールを手中にできます。

世界最大級で相互接続数も最多級のネットワークを誇るCloudflareは、お客様のために日々何十億件ものオンライン脅威をブロックしています。大手企業、起業家、小企業、非営利団体、人権団体、政府機関まで、世界中で数百万に上る組織から信頼をお寄せいただいています。
Cloudflareのコネクティビティクラウドの詳細についてはcloudflare.com/connectivity-cloud、インターネットの最新トレンドとインサイトについてはradar.cloudflare.comをご覧ください。

SNS：ブログ | X | LinkedIn | Facebook | Instagram

将来予想に関する記述

本プレスリリースには、将来予想に関する記述（1933年米国証券法第27A条および1934年米国証券取引所法21E条（いずれもその後の改正を含む）に該当）があり、それらには重大なリスクおよび不確定要因が含まれています。将来予想に関する記述は、「場合があります」、「つもりです、するでしょう」、「はずです」、「見込まれます」、「可能性を探ります」、「する計画です」、「予想します」、「かもしれません」、「意図しています」、「目標とします」、「見積ります」、「検討します」、「考えます」、「推測します」、「予測します」、「潜在的」、「引き続き」、またはそれらの否定表現、あるいは当社の予想、戦略、計画、または意図に関わるその他同様の用語もしくは表現によって識別することができます。しかし、すべての将来予想に関する記述にこうした語句が含まれているわけではありません。本プレスリリースで明示または黙示された将来予想に関する記述には、Cloudflareの製品およびテクノロジーの性能と有効性、Cloudflareの製品および技術によってお客様が得られる利益、Cloudflareの製品および関連する機能がCloudflareのすべてのお客様（既存および見込み）にベータ版として公開、あるいは一般公開されるタイミング。Cloudflareの技術開発、将来の事業活動、成長、イニシアチブ、または戦略、CloudflareのCEOなどのコメントが含まれますが、これらに限定はされません。2023年8月3日に提出されたCloudflareの四半期報告書（フォーム10-Q）を含む、Cloudflareが米国証券取引委員会（SEC）に提出する報告書、およびCloudflareがSECに随時提出するその他の報告書で詳述するリスク（ただしこれらに限定されない）をはじめ、さまざまな要因によって、上記の将来予想に関する記述で明示または黙示した結果と実際の結果との間に重大な相違が生じる可能性があります。将来予想に関する記述は、「場合があります」、「つもりです、するでしょう」、「はずです」、「見込まれます」、「可能性を探ります」、「計画です」、「予想します」、「かもしれません」、「意図しています」、「目標とします」、「見積ります」、「検討します」、「考えます」、「推測します」、「予測します」、「潜在的」、「引き続き」、ないしはそれらの否定表現、あるいはCloudflareの予想、戦略、計画、または意図に関わるその他同様の用語もしくは表現によって識別可能な場合があります。ただし、すべての将来予想に関する記述にこうした識別の語句が含まれているわけではありません。本プレスリリースにて明示または黙示された将来予想に関する記述には、Disallow AI Training、Bot Preference Sync、およびCloudflareの他の製品および技術の機能および有効性、Cloudflareのお客様がDisallow AI Training、Bot Preference Sync、およびCloudflareの他の製品および技術を使用するメリット、Disallow AI Training、Bot Preference Syncやその関連機能がCloudflareの現在および潜在的なすべてのお客様に一般公開される時期、Cloudflareの技術開発、将来の運用、成長、イニシアチブ、または戦略、CloudflareのCEOその他のコメントに関する記述が含まれますが、これらに限定はされません。Cloudflareが2026年8月6日に米国証券取引委員会（SEC）に提出した2026年6月30日を期末とするCloudflare四半期報告書（フォーム10-Q）やCloudflareがSECに随時提出するその他の文書で詳説するリスク（これらに限定はされません）をはじめ、さまざまな要因によって、上記の将来予想に関する記述で明示または黙示した結果と実際の結果との間に重大な相違が生じる可能性があります。

本プレスリリースに含まれる将来予想に関する記述は、あくまで記述当日現在の事象についてのみ言及しています。Cloudflareは、法律で義務付けられた場合を除き、本プレスリリースの日付以降の事象や状況を反映するために、あるいは新しい情報や予期しない事象の発生を反映するために、将来予想に関する記述を更新する義務を負いません。Cloudflareが将来予想に関する記述で開示した計画、意図、予想は実際に実行・達成されない場合があるため、Cloudflareの将来予想に関する記述に過剰に依存すべきではありません。