AI-translated from English; not yet reviewed by a fluent editor.
# Cloudflare的AI機器人預設值取決於網站廣告與既有設定
> Cloudflare為新加入、靠廣告營利的網域提供不供訓練設定,並在廣告頁面封鎖代理程式。既有網域沿用移轉後的選擇;擁有者可檢查三項控制。
By BIG CHANGE Editorial
Published: 2026-10-18T21:03:34.849Z
Updated: 2026-10-18T21:03:34.849Z
Canonical: https://bigchange.ai/blog/cloudflare-ai-search-training-agent-access-controls

AI-generated conceptual illustration by BIG CHANGE; no real website, Cloudflare setting, crawler access or test result is depicted.
Cloudflare現在為網站擁有者分別提供搜尋爬蟲、模型訓練爬蟲與AI代理程式的控制選項。其[9月15日推出的功能](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/)為新網域提供兩種不同的起始設定。靠廣告營利的網站會獲建議採用Search: Allow、Training: Disallow AI Training,以及Agent: Block on pages with ads。不透過廣告營利的網站,三項都獲建議設為Allow。擁有者可在初始設定期間或之後變更建議值。
既有Cloudflare網域依照先前的選擇移轉。原本未開啟舊版「Block AI Bots」開關的網站,Search、Training與Agent都會移轉為Allow。曾選擇任一舊版封鎖選項的網站,則移轉為Search: Allow、Training: Disallow AI Training,以及Agent: Block on pages with ads。先前已設定三項控制的網域,會依Cloudflare的[移轉表](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/)保留這些選擇的實際效果。所有方案都可使用這些控制,包括Free;方案是否符合資格,不能告訴擁有者網域目前採用哪項政策。
## 三種類別涵蓋什麼
Cloudflare的[7月變更紀錄](https://developers.cloudflare.com/changelog/post/2026-07-01-ai-traffic-options/)將**Search(搜尋)**定義為建立內容索引、用來回答之後查詢的爬取行為。**Agent(代理程式)**涵蓋代表個人即時執行的活動,包括聊天內容擷取機器人與瀏覽器操作代理程式。**Training(訓練)**涵蓋為模型訓練或微調而蒐集資料。爬蟲可能具有不只一種用途。Cloudflare表示,每項封鎖選項涵蓋其分類中已驗證的機器人,以及被歸為同類的其他未驗證機器人。這是依分類執行的控制,並不表示每個自動化瀏覽器或無法識別的請求都會被攔下。
對採用廣告營利建議值的網域,「Block on pages with ads」會對Cloudflare偵測到正在放送廣告的頁面套用Agent類別控制;它不是全站代理程式禁令。此預設組合仍允許Search。Training設定則不同:9月的**Disallow AI Training(不允許AI訓練)**透過Bot Preference Sync發布不供訓練的偏好,並封鎖訓練爬蟲,但Cloudflare稱為Accountable的混合用途爬蟲除外。這些Accountable爬蟲可在遵守訓練偏好的同時繼續進行搜尋爬取。Cloudflare表示,此設定會分別處理純訓練用途爬蟲,因此封鎖它們不必連搜尋一起關閉。
這套9月安排細化了[7月文件](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/);舊文件仍描述一種未來預設值,會在廣告頁面同時封鎖Training與Agent。較晚發布的[上線公告](https://www.cloudflare.com/press/press-releases/2026/cloudflare-helps-end-the-search-or-ai-training-tradeoff/)與Cloudflare詳細的9月移轉及建議表,明列新加入的廣告營利網域應採Disallow AI Training,廣告頁封鎖則套用於Agent。不應將較早的描述解讀為適用於所有既有客戶的政策。
「Disallow」與「Block」對兼具搜尋和訓練用途的爬蟲也有不同效果。Cloudflare表示,混合用途爬蟲占其網路中已驗證爬蟲流量的36.6%,但此處沒有提供個別網站的可比較數字。完整的Training封鎖如今包括Googlebot、Bingbot與Applebot等混合用途爬蟲,也可能切斷它們的搜尋存取。Disallow AI Training旨在表達訓練限制的同時,保留Accountable混合用途爬蟲的搜尋存取。Cloudflare也指出目前的限制:Microsoft尚未在`robots.txt`中為Bingbot提供不供訓練偏好的支援,因此現在選擇Disallow AI Training,並不會自動將這項偏好傳達給Bing。
## 網站擁有者可以檢查什麼
在Cloudflare儀表板中,開啟該網域的**Security Settings → Configure AI bot policies(安全性設定→設定AI機器人政策)**,檢查目前Search、Training與Agent的選擇。Cloudflare的[設定文件](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/)說明Allow、Block與Block on pages with ads;9月的說明則解釋新增的Disallow AI Training選項與舊設定移轉方式。若網站依賴廣告曝光,應檢查網域是否採用廣告營利預設組合,以及Agent是否只限於偵測到廣告的頁面。若保留一般搜尋存取很重要,在對混合用途爬蟲選擇Block之前,應先檢查Training選項。
這些是Cloudflare已記錄的控制與推出規則。BIG CHANGE未變更任何Cloudflare帳號,也未量測上線網站的機器人流量。
## 重大變化
Cloudflare已將三種自動化存取用途拆成網域層級政策。對新加入的廣告營利網域,9月的建議保留搜尋存取、表達不供訓練偏好,並在偵測到廣告的頁面封鎖已分類的代理程式。既有擁有者應先查看自己移轉後的設定,再判斷存取規則。
## 來源與延伸閱讀
- [Cloudflare,〈一舉兩得:保持搜尋可見,同時禁止AI訓練〉](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/)(2026年9月15日)。詳細的推出資料來源,涵蓋建議與移轉表、混合用途爬蟲行為,以及Bing的限制。
- [Cloudflare,〈Cloudflare協助終結搜尋與AI訓練之間的取捨〉](https://www.cloudflare.com/press/press-releases/2026/cloudflare-helps-end-the-search-or-ai-training-tradeoff/)(2026年9月15日)。上線公告區分靠廣告營利與其他新網站。
- [Cloudflare Developers,〈管理AI流量的新選項〉](https://developers.cloudflare.com/changelog/post/2026-07-01-ai-traffic-options/)(2026年7月1日)。最初推出三類控制的說明,以及較早的預設值描述。
- [Cloudflare Docs,〈Block AI Bots〉](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/)(頁面標示最後更新於2026年7月1日)。類別定義、已分類的驗證與未驗證機器人,以及儀表板位置;推出前的預設值措辭與9月詳細政策不同。
## Sources
- [Cloudflare,Block AI Bots(最後更新於2026-07-01)](https://developers.cloudflare.com/bots/additional-configurations/block-ai-bots/) — 主要設定文件,標註7月1日:類別定義、已驗證與未驗證分類、廣告頁偵測及儀表板路徑。其未來預設值措辭早於9月推出,應以後來的詳細說明為準。
- [Cloudflare,AI流量控制公告(2026-09-15)](https://www.cloudflare.com/press/press-releases/2026/cloudflare-helps-end-the-search-or-ai-training-tradeoff/) — 主要上線公告:新加入、靠廣告營利的網站允許Search、不允許Training,並在廣告頁封鎖Agent;其他新網站三項都允許。
- [Cloudflare Developers,管理AI流量的新選項(2026-07-01)](https://developers.cloudflare.com/changelog/post/2026-07-01-ai-traffic-options/) — 最初的三類控制推出說明,以及預定的9月預設值。保留此來源是為了交代時間順序,並非將它視為最終推出規則。
- [Cloudflare,一舉兩得:保持搜尋可見,同時禁止AI訓練(2026-09-15)](https://blog.cloudflare.com/accountable-mixed-use-ai-crawlers/) — 判讀時應採用的詳細推出紀錄:新網域建議、既有網域移轉、Disallow與Block對混合用途爬蟲的差別,以及Bingbot限制。