Cloudflare是做什麼的?一文解密「付費爬蟲」商模:逼AI巨頭們為新聞買單,有可能嗎?
Cloudflare是做什麼的?一文解密「付費爬蟲」商模:逼AI巨頭們為新聞買單,有可能嗎?

Cloudflare 執行長馬修·普林斯(Matthew Prince)日前宣布推出「pay-per-crawl」(按爬取付費)機制,意圖迫使 Google 及各大 AI 業者為網路內容付費。

普林斯近期在接受電子報《Crazy Stupid Tech》採訪時指出,隨著 AI 聊天機器人普及,傳統以廣告與流量分潤為基礎的網路新聞生態正遭受前所未有的衝擊,若不及時介入,全球新聞產業恐將崩潰。

普林斯表示,Cloudflare 以其龐大的技術基礎與市場滲透率,具備封鎖 AI 爬蟲的能力,並有望促使 Google 及其他 AI 業者進行產業談判,為網路內容創造新的商業模式。

這個願景的最大挑戰,是在搜尋巨頭 Google 開始為網路內容付費之前,很難說服其他 AI 業者為內容付費。

Google AI Mode
Google推出的新搜尋功能「AI Mode」,就像是直接把旗下的聊天機器人Gemini搬進Google裡。
圖/ Google

「這就是當我們宣布『按次爬取付費』(pay-per-crawl)時最害怕我們會做的事。」 普林斯說道。 「他們真的以為我們會一夜之間在 20% 的網路上封鎖 Googlebot。」

普林斯表示,目前還沒有這樣的計畫……,至少暫時沒有。「但這已經讓他們(Google)緊張了,因為他們認為:『你可能會讓搜尋功能崩潰。』」

為何要 AI 業者為內容付錢,要先說服 Google?

普林斯曾在科技領導力論壇演說時指出,在過去的 25 年中,Google 一直是網路最大的贊助商,「他們發明了搜尋引擎,提供了一張『藏寶圖』,讓使用者點擊連結瀏覽網頁,還建立了整個廣告生態系和出版商訂閱生態系統,為獨立網站提供了資金。」

但在 10 年之內,這種情況產生了兩次大變化。

第一次是在大約 2015 年,Google 開始在搜尋結果頁面(SERP)頂端顯示「知識面板」(Knowledge Panel),其會在搜尋結果旁的資訊框中提供即時答案。這使得用戶不用點擊任何網頁,使得內容創作者從 Google 獲取流量的難度增加了三倍。

而這種現在被稱之為「零點擊搜尋」的狀況,在 AI Overview 問世之後日益嚴重。最近一年,由於來自 Perplexity、OpenAI 和 Anthropic 等公司的壓力,Google 從「搜尋引擎」轉變為「答案引擎」。

搜尋引擎提供藏寶圖,而答案引擎直接提供答案,這讓使用者更沒有點擊外部連結的誘因。

零點擊搜尋變成主流.jpg
自 2024 年 5 月 Google 推出 AI Overviews 以來,新聞發布商的自然流量從超過 23 億次的高峰,下降至不足 17 億次。
圖/ Similarweb

這種轉變使內容創作者從 Google 獲取流量的難度又增加了三倍,總體而言比 10 年前難了 9 倍。對於 OpenAI,難度增加了 750 倍;對於 Anthropic,則增加了 37,000 倍,嚴重影響內容、新聞網站的廣告收入與生存空間。

延伸閱讀:6萬次爬蟲只換來1次點擊!AI搜尋促成「流量大斷崖」:Google如何改寫搜尋行規?

普林斯用一個比喻來形容這種變化:內容創作者就像鍋中的青蛙,Google 逐漸提高水溫,青蛙雖然感到不適,但別無他法。

簡單來說,普林斯認為 Google 長年以「免費爬取→導流→廣告分潤」的模式主宰網路生態,而其他 AI 公司擔心「自己付、Google 不付」會失去競爭力,因此不會率先全面付費,除非 Google 也付,才能形成「公平的遊戲場」。

Cloudflare 是做什麼的?為何有望逼 Google 為內容付費?

在解釋普林斯的動機之前,有必要先拆解 Cloudflare 的商業模式,以釐清這間公司身處於使用者、Google,以及其他 AI 巨頭中間的獨特位置。

按照 Cloudflare 官網的解釋,這是一家提供「全球連通雲」(Connectivity Cloud)的公司,透過統一的網路、安全與開發平台,加速並保護網站、應用程式與 API 的效能、可靠性與安全性。核心服務包含 CDN、DDoS 防護、DNS、WAF 與邊緣運算等,協助各規模組織在最接近使用者的節點交付內容與安全。

白話來說,Cloudflare 是一個幫網站「跑得更快、比較不會被攻擊、比較不會當掉」的雲端服務。它在全球很多據點幫忙傳資料、擋壞流量,讓上網體驗更順更安全。

一句話:Cloudflare 類似「內容保鑣」

可以把 Cloudflare 想成三個角色:快遞員、交通警察、保鑣。快遞員會把常用的圖片和檔案先放在離使用者最近的站點,開網頁就更快看到內容(這叫 CDN 快取);交通警察會幫資料挑最快的網路路線傳送,繞開塞車路段(像 Argo 智慧路由);保鑣會在門口擋掉奇怪或惡意的請求,像 DDoS 攻擊、機器人亂撞登入,避免網站被灌爆。

以「pay-per-crawl」機制為例(上段中提到的保鑣),AI 機器人(AI Crawler)想要拿到網站上的資料,必須經過一連串的檢查和審核:

  1. AI 機器人發出請求
    機器人就像一個想進入網站的訪客,先敲門。
  2. Cloudflare 第一關:自訂規則(WAF)
    這一關像是保全人員,會根據網站設定的規則(例如:這個訪客是不是黑名單、是不是行為怪異)來決定要不要放行。
  3. Cloudflare 第二關:AI 審查(AI Audit)
    這一關是更聰明的保全,會用 AI 技術判斷這個訪客是不是不受歡迎的機器人,如果是,就直接擋下來。
  4. Bot Solutions(機器人專用通道)
    如果前面都通過,還會再經過一個專門處理機器人的通道,進一步檢查這個訪客是不是正常的機器人。
  5. AI 審查:按次付費(Pay Per Crawl)
    最後,如果這個機器人真的想進來,還要付錢才能拿到網站的資料。
  6. 成功進入網站內容
    只有通過所有關卡、而且有付錢的機器人,才能真正看到網站上的內容。
Cloudflare爬蟲機制.jpeg
Cloudflare阻擋AI爬蟲的機制。
圖/ Cloudflare

普林斯有何動機?為何要幫內容網站向「AI們」收錢?

另一個值得思考的問題是,在科技業進入.com世代以後,就幾乎沒有科技巨頭真正站在內容網站的權益這端(或說,搜尋與內容的利益分配天平長時間傾向前者),為何現在 AI 時代普林斯卻回頭關心這些?

一句話來說,他既想「救網路與新聞」,也想讓 Cloudflare 賺大錢。

動機一:喜歡油墨味,網路與新聞都「不能死」

在理念層面,普林斯被描述為非典型只追求「新」的矽谷 CEO,更像是披著駭客外皮的文藝復興。這種解讀與普林斯的「文組」背景有關。

普林斯在大學期間主修英國文學和電腦科學,但也曾就讀法學院三年並獲得學位,隨後也進入商學院就讀。他曾表示,在他所獲得的學位中,英國文學學位在擔任公司執行長時,在溝通、寫作和團隊協調方面發揮了最大的作用;而他擔任反壟斷律師的經驗,對於 Cloudflare 在「未來網路」的發展中可能遇到的挑戰將極具價值。

值得一提的是,就讀芝加哥大學法學院時,普林斯曾創辦法律雜誌。在《Crazy Stupid Tech》的側寫中,普林斯「喜歡油墨味、重視報業」,甚至與妻子收購了家鄉報紙《Park City Record》。

總而言之,在願景這一端,普林斯希望「拯救網路與新聞」,避免知識被少數 AI 平台壟斷。在極端的「黑鏡式」未來中,這些 AI 公司會僱用所有記者和研究人員,可能使知識被分割成獨立的「筒倉」。

動機二:充當「中間人」錢景可觀

而在商業模式這端,充當一般用戶與 AI 巨頭之間的「中間人」,絕對也是一門好生意。

普林斯指出,目前 80% 的 AI 公司已經是 Cloudflare 的客戶,普林斯與 Sam Altman(OpenAI 執行長)等業界領袖保持著緊密關係;同時,很大一部分的網路內容已經透過 Cloudflare 的網路運行,且全球所有主要內容出版商都在遷移到 Cloudflare。

這種獨特的「中間人」地位,Cloudflare 一方面嘗試為內容創作者建立新的市場機制,類似 iTunes 和 Spotify 振興音樂產業。他認為這有機會將每年 100 億美元的資金流回出版生態系統;另一方面,Cloudflare 能夠與 Google、Microsoft、Apple 等公司的高層對話,推動他們成為未來網路的贊助商。

spotify.jpg
Prince以音樂產業的轉變為例,iTunes和Spotify等服務最終為音樂創作者帶來了遠超以往的收益。

普林斯坦承,未來若協助出版商談成授權與分潤,Cloudflare 會像經紀人一樣,從 AI 公司支付的授權費中抽取一定比例,或向內容網站收取技術服務費。技術上,Cloudflare 能在客戶授權下封鎖或標記 AI 爬蟲,形成談判槓桿,並以合規、可執法的方式提升「不付費就更麻煩」的成本。

白話來說,Cloudflare 可同時向內容網站與 AI 公司兩方收費或抽成。

AI 巨頭態度不一!Perplexity 被歸類「壞壞 AI」

在談到目前 AI 巨頭的合作態度,普林斯特別點名 OpenAI 在授權與合作上態度積極,願意談授權與分潤,甚至有望成為「新一代內容守護者」。

反觀 Perplexity 等公司,則被指控試圖繞過封鎖、甚至冒用媒體名義生成內容,被普林斯視為「不法之徒」,未來將加強技術與法律手段應對。

Cloudflare 能成功當上普林斯口中的「中間人」,在未來賺得盆滿缽滿嗎?Pay Per Crawl 又能否成為全球內容網站的收入救星?仍有待時間驗證。

延伸閱讀:Perplexity是資料小偷?Cloudflare揭偽裝Chrome爬蟲,遭反嗆「我看你是不懂AI助理」
舊時代SEO規則死透了?專家曝「點擊雪崩」5大關鍵:AI搜尋時代,該如何讓網站往前靠?

資料來源:Investing 101Crazy Stupid Tech

往下滑看下一篇文章
社群帳號不是門牌!TWNIC籲中小企業註冊.tw域名,拒當「數位無殼蝸牛」
社群帳號不是門牌!TWNIC籲中小企業註冊.tw域名,拒當「數位無殼蝸牛」

在詐騙與帳號仿冒層出不窮的數位環境中,企業的「可信身分」正面臨前所未有的挑戰。根據台灣網路資訊中心(TWNIC)《2024 台灣網路報告》指出,近三個月內有 64.8% 的台灣民眾曾接觸詐騙訊息,其中 3.56% 實際受騙造成財損;警政署「165 打詐儀表板」統計亦顯示,2025 年詐騙財損金額已突破新台幣 706億元,其中多數案件是透過社群媒體與通訊平台進行。這些開放式平台雖然便利了即時互動,但匿名性與訊息傳播的速度,也讓詐騙訊息更容易偽裝成真實資訊,削弱了大眾對整體線上溝通環境的信任。

這樣的風險並不僅限於個人使用者。TWNIC執行長余若凡指出,當企業選擇以社群平台作為主要對外窗口時,也會受到同樣的信任影響。一旦消費者對平台環境產生疑慮,即使企業本身並無不當行為,品牌的可信度仍可能受到波及。若再發生帳號被駭、被仿冒或遭停權的情況,顧客更難以分辨官方與假冒來源,企業多年累積的信任與流量可能在短時間內流失。

中小企業網站現況:有門面卻留不住客人

台灣網商協會秘書長林原也指出,多數中小企業雖已踏入數位轉型,但網站建置往往只是「靜態海報型」,缺乏會員、金流或互動功能。他以形象比喻提到,域名是門牌、虛擬主機是房子、網站內容是軟裝。沒有門牌,就像住在別人的房子,隨時可能被趕走;有了門牌與房子,才有可能好好布置與經營。他強調,若企業長期依賴社群與電商平台,就等於在替平台打工,不僅需承受高額抽成,也受限於演算法與帳號規則,一旦被封鎖或降觸及,就會發現自己什麼都沒有留下。

台灣網商協會秘書長林原
台灣網商協會秘書長林原
圖/ 數位時代

他進一步提醒,企業若僅依賴社群與電商平台,等於長期在替平台打工。平台不僅抽成高,還掌握演算法規則與顧客數據,企業一旦被降觸及或封鎖帳號,就會發現自己其實什麼都沒有留下。這樣的結構,讓許多中小企業在數位時代仍然難以累積自有數據,更無法建立長期品牌資產。「我們常看到企業抱怨平台廣告費高漲、成效卻逐年下降,但卻忽略了最基礎的一件事:沒有自己的域名,等於沒有真正的數位身分。」林原直言,中小企業要邁向數位獨立,第一步就是註冊屬於自己的專屬域名。

拒當數位無殼蝸牛,從.tw開始

為協助中小企業從根本建立「可信身分」,TWNIC作為國家級網路資訊中心,不僅負責 .tw 與 .台灣 頂級域名的管理,也肩負推動台灣整體數位信任生態的責任。TWNIC從三個面向推動相關工作:

  • 政策面 :持續優化域名註冊流程與推廣政策,降低中小企業導入門檻;
  • 教育面 :辦理講座與工作坊,提升企業主對於數位域名資產管理與資安防護的認識;
  • 合作面 :與受理註冊機構及產業夥伴合作,協助企業從註冊、建站到驗證,建立完整的一站式服務。

在具體措施上,TWNIC近期推出「52168.tw」專案,針對 112 年 1 月 1 日後完成登記的公司行號,提供一年期免費域名申請優惠,鼓勵企業註冊專屬域名、打造獨立品牌門面。同時,也推行「綠色域名認證」制度,企業通過註冊人身份驗證後,其 WHOIS 資料將標示「已通過.tw綠色域名認證」,象徵資訊真實、完整且可信,猶如掛上一面值得信賴的門牌。此外,TWNIC亦提供 Registry Lock 與 DNSSEC 等安全機制,協助企業以低成本強化資安防護與品牌保護,逐步建立穩固的數位基礎。

52168活動網站
圖/ 52168活動網站

余若凡強調,唯有當企業擁有唯一、可驗證的數位門牌,台灣整體的數位信任基礎才能真正穩固。特別是在生成式 AI 與跨平台資訊流高度重疊的時代,企業若要在搜尋與推薦機制中被正確辨識,擁有清楚的官方域名將是最基本的條件。域名不僅是連結網站的網址,更是品牌在數位空間中的憑證與信任標識。

同時余若凡也呼籲,中小企業不應將品牌的未來寄託於他人平台,而應主動建立自有域名與網站。這不只是為品牌架起一道防線,更是為台灣的網路生態奠定可信任的基礎,讓每一次點擊都能源於信任。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
一次搞懂Vibe Coding
© 2025 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓