新聞稿. 2026年9月15日
Cloudflare 協助終結「搜尋」與「AI 訓練」之間的兩難抉擇
本新聞稿亦提供以下語言版本: Deutsch, English, Español (España), Español (Latinoamérica), Français, Indonesia, Nederlands, Tiếng Việt, ไทย, 한국어, 日本語
新的控制選項和推薦設定於今日上線,使發布者和企業能夠自主掌控其內容在搜尋、AI 訓練及 AI 智慧體中的使用方式。領先的混合型爬蟲業者已提供或正在建構能尊重這些選擇的控制機制。
加州舊金山 — 2026 年 9 月 15 日 — 領先的全球連通雲公司 Cloudflare, Inc. (NYSE: NET) 今日宣布推出新的 AI 爬蟲「可問責」 (Accountable) 認定。同時,Cloudflare 推出了 Disallow AI Training(禁止 AI 訓練)設定,讓任何網站都能拒絕其內容被用於 AI 訓練,同時仍能完整出現在搜尋結果中。十一週前,Cloudflare 表示網站擁有者應該對 AI 如何使用其內容擁有實質的控制權,並闡明了爬蟲營運商必須滿足哪些條件才能獲得持續的存取權。Apple、Google 和 Microsoft 現已被標示為「可問責」等級,並已證明符合這些標準,或已給出具體的時程來達成。如果網站擁有者選擇「封鎖訓練」,其他未達標的混合型爬蟲將會被封鎖。
近三十年來,爬蟲與網站擁有者之間的交易很簡單:爬蟲抓取內容,並回饋流量。AI 改變了這個規則。混合型爬蟲(即一個爬蟲同時為搜尋索引和 AI 訓練收集內容)現在佔據了 Cloudflare 網路上經驗證爬蟲流量的 36.6%,成為佔比最大的單一類別。大多數網站擁有者仍希望被發現:只有不到 1% 的網站封鎖搜尋爬蟲,而有 17% 的網站限制 AI 訓練。在此之前,拒絕 AI 訓練往往意味著失去那些缺乏相應控制機制的爬蟲所帶來的搜尋流量。
Cloudflare 共同創辦人兼執行長 Matthew Prince 表示:「這就是我們讓網際網路變得更好的方式:保持開放性使搜尋具有價值,同時賦予網路背後的人們和企業實質的控制權,決定他們的作品如何被使用。我們期待與 Apple、Google 和 Microsoft 等公司持續進行協作互動,共同建立一個健康的生態系統。」
混合型爬蟲曾是 AI 訓練問題中最棘手的部分。接下來的挑戰在於 AI 摘要功能:Cloudflare 認證為「可問責」的每個營運商,都必須提供讓網站擁有者選擇退出 AI 摘要的機制。目前,這是針對各營運商單獨設定的「是/否」選擇。Cloudflare 的目標是在明年初,讓網站擁有者能夠在一個統一的介面上,自主控制其內容被納入使用的範圍。
全新的控制選項與推薦設定
Cloudflare 正在將其「封鎖 AI 機器人 (Block AI Bots)」開關替換為三個獨立的控制項:一個用於搜尋,一個用於 AI 訓練,一個用於 AI 智慧體。Cloudflare 上的新網站現在將看到根據其商業模式量身打造的推薦設定:
- 投放廣告的網站: 允許搜尋爬取,禁止 AI 訓練,並在包含廣告的頁面上阻止 AI 智慧體存取。
- 所有其他網站: 允許搜尋、AI 訓練和 AI 智慧體存取,這與大多數非廣告支援網站的現有運作方式一致。
Cloudflare 也將其 Managed Robots.txt(受管理的 Robots.txt)功能替換為 Bot Preference Sync(機器人偏好同步),讓網站擁有者只需設定一次爬取偏好,即可自動套用到所有支援的爬蟲。客戶可以隨時輕鬆變更他們的設定和偏好。
可問責的 AI 爬取
Cloudflare 為可問責、透明的 AI 爬取(包括混合型爬蟲)制定了明確的標準。營運商必須滿足或承諾在規定期限內滿足以下四項要求:
- 提供明確途徑,允許網站擁有者透過 robots.txt 或類似標準選擇退出 AI 訓練
- 允許網站擁有者選擇退出 AI 產生的搜尋摘要
- 向網站擁有者提供 URL 級別的可見性,以展示其內容如何用於搜尋和訓練
- 公開確認:選擇退出訓練不會影響網站在傳統搜尋中的排名
Apple、Google 和 Microsoft 已證明符合這些標準。例如,Google 提供了 Google-Extended 控制項,使網站能夠在不退出搜尋的情況下選擇退出訓練,並在今年早些時候宣布了新工具來幫助網站擁有者應對搜尋領域中的 AI 變革。其他領先的 AI 公司則為搜尋和訓練營運單獨的爬蟲。這讓 Cloudflare 能夠在不影響搜尋的情況下封鎖他們的訓練爬蟲,因此 Cloudflare 也將相關爬蟲歸類為「可問責」。Cloudflare 在 Cloudflare Radar 上發布了符合資格的營運商完整清單。
Cloudflare 也是網際網路工程任務組 (IETF) 開放標準工作的積極參與者,包括正在開發中的「ai-prefs」規範,該規範將允許任何網站以標準化、可移植的方式表達其 AI 存取偏好。我們今天推出的控制功能正是為了與這些新興標準協同運作而設計的。
如需進一步瞭解 Cloudflare 在 AI 與內容控制方面的政策,請參閱以下資源:
關於 Cloudflare
Cloudflare, Inc. (NYSE: NET) 是一家業界領先的全球連通雲公司。它為各种組織提供支援,不僅幫助世界各處的員工、應用程式和網路提升速度和安全性,還降低了複雜性和成本。Cloudflare 的全球連通雲提供了功能最齊全的統一雲端原生產品和開發人員工具平台,因此,任何組織都能獲得高效工作、不斷開發和加速業務所需的控制能力。
Cloudflare 由世界上規模最大且互連性最高的網路之一提供支援,每天可為客戶封鎖數十億個線上威脅。它贏得了全球數百萬個組織的信賴,從最大的品牌到企業家和小企業,再到非營利組織、人道主義團體以及政府。
若要深入瞭解 Cloudflare 的全球連通雲,請造訪 cloudflare.com/connectivity-cloud。若要深入瞭解最新的網際網路趨勢和深入解析,請造訪 radar.cloudflare.com。
關注我們:部落格 | X | LinkedIn | Facebook | Instagram
前瞻性聲明
本新聞稿包含經修訂的 1933 年《證券法》第 27A 節與經修訂的 1934 年《證券交易法》第 21E 節含義所載前瞻性聲明,且這些聲明涉及重大風險與不確定性。在某些情況下,您可以識別前瞻性聲明,因為其包含「可能」、「將會」、「應該」、「期望」、「探索」、「計畫」、「預期」、「會」、「打算」、「目標」、「專案」、「考慮」、「相信」、「估計」、「預測」、「潛在」或「繼續」等詞語、這些詞語的否定詞,或是其他涉及 Cloudflare 期望、策略、計畫或意圖的類似術語或表達方式。然而,並非所有前瞻性聲明都包含這些識別詞語。本新聞稿中所明示或暗示的前瞻性聲明,包括但不限於以下內容:Disallow AI Training、Bot Preference Sync 及 Cloudflare 其他產品與技術之功能與有效性;Cloudflare 客戶使用 Disallow AI Training、Bot Preference Sync 及 Cloudflare 其他產品與技術所能獲得之效益;Disallow AI Training、Bot Preference Sync 或其任何相關功能對所有既有及潛在 Cloudflare 客戶全面開放的時間安排;Cloudflare 的技術發展、未來營運、成長、計畫或策略;以及 Cloudflare 執行長與其他相關人士所發表的評論。由於多項因素,實際結果可能與前瞻性聲明中所載明或暗示之結果存在重大差別,包括但不限於 Cloudflare 向證券交易委員會 (SEC) 提交之文件中詳述的風險,包括 Cloudflare 於 2026 年 8 月 6 日提交的截至 2026 年 6 月 30 日期間的 10-Q 表格季度報告,以及 Cloudflare 可能不定時向 SEC 提交的其他文件。
在本新聞稿中所做之前瞻性聲明僅與截至聲明日期為止的活動相關。Cloudflare 沒有義務更新本新聞稿中做出之任何前瞻性聲明,以反映新聞稿發佈後的活動或情況,或是反映全新資訊或意外事件的發生狀況,除非法律要求。Cloudflare 可能不會實際完成 Cloudflare 前瞻性聲明中所披露的計畫、意圖或期望,且您不得過度依賴 Cloudflare 的前瞻性聲明。
© 2026 Cloudflare, Inc. 保留一切權利。Cloudflare、Cloudflare 標誌及其他 Cloudflare 標記是 Cloudflare, Inc. 在美國及其他司法管轄區的商標及/或註冊商標。本網站提及之所有其他標記和名稱可能是其各自擁有者的商標。