輝達為什麼要買Groq?工程師飯碗真的不保了?台大教授剖析2026年AI競賽兩大主軸
輝達為什麼要買Groq?工程師飯碗真的不保了?台大教授剖析2026年AI競賽兩大主軸

2025 年是 AI 產業從「技術狂熱」走向「商業理性」的轉捩點。在這一年,我們見證了 DeepSeek 帶來的成本衝擊、推理模型(Reasoning Model)的崛起,以及企業端對 ROI(投資報酬率)的極度渴求。當燒錢追夢的時代遠去,決定企業生死的不再只是模型參數量,而是「TCO(整體擁有成本)」的優化能力。

以下 Q 為《數位時代》總編輯王志仁提問,A 為台大資工系教授徐宏民的回答,徐教授將以學術研究與產業投資的雙棲視角,解析 AI 如何從生產力工具進化為改變企業結構的系統性力量。

徐宏民_台大資工系教授_2024_01_05_蔡仁譯攝-1.jpg
台大資工系教授徐宏民
圖/ 蔡仁譯攝影

Q1:回顧 2025 年,AI 技術發展有哪些關鍵的收斂點或方向性的轉變?

A:我建議從「橫向時間軸」與「縱向供應鏈」兩個向度來看這件事,這能幫助我們更清晰地看見 AI 究竟發生了什麼。

首先是橫向的時間軸。 這一波 AI 的起源可以回溯到 2012 年,當時深度學習在影像辨識取得突破(如人臉辨識、影像監控);2017 年 Transformer 架構出現,這原本是用於文字、搜尋、翻譯,但後來演化成 2020 年的 GPT-3;到了 2022 年底 ChatGPT 誕生,讓全球見識到 AI 的「泛化能力」——同一個模型能處理多樣化的工作。而到了 2024 至 2025 年,最重要的技術進展是「推理模型」 的成熟,AI 開始能處理更複雜的邏輯思考。

其次是縱向的供應鏈結構。 AI 並非單獨的模型,它是一個龐大的生態系。從底層的晶圓代工(Foundry)、IC 設計到硬體伺服器(包含散熱、PCB、交換機等),再往上到 CSP(雲端服務商,如 Google, AWS, Azure),接著才是大語言模型以及基於模型開發的新創應用。

今年初 DeepSeek 的崛起是一個經典案例,它用更低成本的方式達到強大的模型能力,這對台灣是非常有利的,因為當模型的競爭變快,對硬體(Server/散熱/通訊)的需求就會更高。所以 2025 年的一個關鍵收斂是:大家確認了大模型的能力,並開始往生態系的上下游尋找最優解

Q2:2025 下半年,大家從 Benchmark(基準測試)數據,轉而關注營運面,背後原因為何?NVIDIA 又為何砸下 200 億美元收購 Groq?

A:2025 年最大的轉變是:大家不再只談「能力」,而開始談 P&L(損益表)與 TCO。當 Transformer 技術架構在未來三到五年確立後,產業必然會走向極致的「成本最佳化」。

企業現在考慮的不是模型多聰明,而是「我用不用得起」。 這催生了「電力戰爭(Energy War)」 的元年。現在大廠聊的不再是「要買幾片晶片」,而是「我有幾個 MW(百萬瓦)甚至 GW(十億瓦)的電力」。電力的限制已經取代晶片,成為資料中心擴張的真正瓶頸。以 Google 為例,他們在 2025 年 8 月發表,透過軟硬體垂直整合與自研晶片,在一年內將單一 Token 的用電成本降低了 33 倍。

這種趨勢直接引發了雲端服務商(CSP)紛紛自研 TPU 或 ASIC 晶片,以擺脫對高價 GPU 的依賴。而 NVIDIA 以 200 億美金併購 Groq,正是對此趨勢的強力回應。Groq 以 LPU(語言處理單元)聞名,專攻推理端(Inference)的極致效率。當市場開始質疑 GPU 在執行推理任務時不夠省電、不夠有效率時,NVIDIA 必須做出佈局。這就像 2019 年他們收購 Mellanox 解決通訊瓶頸一樣,收購 Groq 是為了在「推理效率」這塊陣地插旗,應對來自 Google TPU 或其他 ASIC 晶片的威脅,確保自己在營運成本戰中依然立於不敗之地。

LPU晶片是什麼?
LPU 是一種專為 AI 推論任務設計的特殊應用集成電路(ASIC)。其核心目標在於解決大型語言模型(LLM)在生成文字時的延遲與吞吐量瓶頸,標榜能比傳統 GPU 提供更快的反應速度與更高的效能。

Q3:在企業應用端,有哪些領域已經真正將 AI 轉化為實際的生產力?

A:寫程式(Coding)是目前獲利最清晰的領域。目前全球有一半的 Token 是被用在寫 Code。以矽谷新創 Cursor 為例,他們在 2024 年 12 月只有 18 個工程師,年營收 5,000 萬美金;至 2025 年營收已經衝破 10 億美金,增長速度極其驚人,卻也證明了市場的龐大需求。

甚至連原本對資料最敏感、最保守的 IC 設計公司,現在也在大規模使用 AI 工具來加速晶片設計。雖然他們對資料安全有疑慮,但會透過 Hybrid 模式(混合模式),將部分運算放在 Local Server 處理,或使用大型 EDA(電子設計自動化)工具商提供的 AI 服務。台灣與矽谷的 IC 設計大廠,今年都大幅擴張 AI 團隊並投入 GPU Server,進行設計流程的最佳化。

Q4:當 AI 可接手寫 Code 的工作,是否象徵工程師將被取代?

A:我認為是「職能重組」,未來的工程師不再只是「寫 Code 的人」,而更像是 FDE(Forward Deployment Engineering,前線部署工程師),這同時也是現在矽谷最缺的職位。因競爭週期極快,企業需要的是進來就能馬上解決問題的人。

當 AI 可負責處理「定義明確」的重複性工作,這類初階助理級的任務不再需要人力手工撰寫;而工程師的角色則趨向:去前線理解客戶需求,並在擁有靈感後去觸發(trigger)、將商業邏輯「翻譯」給 AI。

我看到許多資深開發者會同時開啟好幾個 AI 引擎交叉比對、協助除錯。研究顯示,這種人機協作模式能讓開發速度提升 1.5 倍到 3 倍。這就是為什麼企業願意支付高額成本投資 AI 工具,因為當研發周期大幅縮短,其 ROI 是極其可觀的。

縱使初階工作會消失,但具備核心領域知識與問題定義能力的人,價值及生產力反而會倍增。這不只是在軟體業,包含 HR 的招募流程、財務的預測報告,AI 都在將繁瑣的流程自動化。

Q5:展望 2026 年,預期 AI 將如何從「工具」進化為「系統」的一部分?有哪些關鍵趨勢?

A: 2026 年的關鍵字將是「Chat to Action」。AI 不再只是「給建議」,而是轉向執行「動作」。在企業內部,這會體現為 Agent(代理)。例如 HR Agent 自動處理法規諮詢與健檢安排,或 Finance Agent 進行財報預測與下單決策,甚至實體機器人的動作執行。

隨著 AI Token 的成本像當年 Internet 封包(Packet)一樣指數型下降,我們會看到兩個主軸:

1. 混合雲與邊緣運算(Edge AI)的崛起: 企業內部的高價值、高敏感性資料(如財務、薪資)不能上雲(Internet)。而 2025 年的科學驗證發現,參數在百億到千億之間的小模型已具備足夠的推理能力,不需要兆級的大模型就能處理特定任務。這意味著 2026 年會看到更多搭載於企業內網、個人手機或醫療設備上的「系統級」大腦,實現高隱私、低成本的智慧化。

2. 責任歸屬與治理: 當 AI 開始做決策,誰來負法律責任?因此會催生出更多關於資料治理、安全與可靠性的解決方案。

總結來說,2026 年 AI 將不再只是一個對話框,而是整合在服務場域中的「解決方案」。我們正處於一個長週期的起點,重點不在於擔心被取代,而在於如何利用便宜的 Token,在特定產業的垂直領域中創造出不可替代的創意與價值。

完整收聽Podcast|EP267. AI 在2025帶來的驚喜和失望有哪些?年末輝達收購Groq的用意是什麼? ft. 台大資工系教授徐宏民

延伸閱讀:Google發布10組Gemini提示詞!教你將目標拆解成每天、每週可執行計畫,中英文指令一次收

關鍵字: #AI #時事追蹤
往下滑看下一篇文章
數位時代 X 國泰金控 從百套系統上雲到 Cloud First:國泰如何把雲端變成AI成長引擎?
數位時代 X 國泰金控 從百套系統上雲到 Cloud First:國泰如何把雲端變成AI成長引擎?

2019年金融監理機關正式將雲端納入委外規範後,揭示金融業上雲時代來臨,國泰金控數數發中心成立雲端策略發展部,負責擬定集團上雲策略,並於2020年正式啟動7年集團雲端轉型計畫;在多數金融機構仍停留在單點遷移或IT現代化的現下,國泰金融集團在 2025 年即完成 100 套系統上雲,更將雲端轉型階段從 Cloud Ready、Cloud Adoption 推向 Cloud First,成為數據與人工智慧應用的關鍵引擎。

國泰金控資訊長|吳建興 James Wu
圖/ 數位時代

「百套系統上雲不僅僅是數字,更是讓國泰從『 IT 進化業務』邁向『 IT 驅動成長』的關鍵轉折。」國泰金控雲端策略發展部協理顏勝豪表示,上雲帶來的效益十分顯著,包括提升資源可用性與營運敏捷度、減輕 IT 維運負擔;同時,雲端業者多具備零碳排或綠能機房機制,亦有助於企業朝向 ESG 永續營運邁進。「金融上雲不是單純的現代化基礎設施或者是升級技術,而是為了換取速度與可靠度,讓集團可以加速創新腳步、彈性調配資源,以及培育所需人才與技能,為未來做最佳準備。」
為讓集團員工、金融同業以及有志上雲的夥伴可以進一步探討雲端轉型的各種可能,國泰金控舉辦雲端轉型成果發表會,會中除有集團子公司分享最新成果,三大公有雲平台業者也從不同技術視角共同探討在合規、資安與 AI 應用的可能。

七年、三階段,國泰金融集團將雲端內化為營運流程與創新引擎

國泰金控科技長|姚旭杰 Marcus Ya
圖/ 數位時代

為什麼國泰可以領先市場完成雲端轉型、數據與 AI 賦能業務?

顏勝豪認為,雲端轉型的起點不是直接遷移系統,而是從四個面向打底:應用系統盤點評估、雲端架構設計、雲端遷移藍圖規劃,以及組織治理框架建立,而這也是 Cloud Ready 階段最重要的事情。
「不同子公司有不同商業模式與節奏,若沒有共同語言與平台底座,上雲很容易各自為政。」顏勝豪表示,為讓所有員工可以齊步前行,國泰以雲端遷移方法論 Cathay 6R(註1)作為共同語言、用平台作為共同底座,讓轉型不只是技術選擇,而是集團行動。
完成單一系統的雲端遷移後,便進入 Cloud Adoption 階段。在這個階段中,要透過大規模遷移建立更成熟的上雲標準作業流程(SOP),透過 FinOps 機制控管與優化雲端營運成本,以及透過自動化與治理模型確認多雲環境與安全與維運穩定性,目標是將雲端內化為組織日常運營的一部分,進而邁向 Cloud First 階段:在合規前提下,新專案與系統升級預設在雲端環境開發,並善用雲原生優勢加速新產品功能開發速度。
「集團雲端策略只有一個核心原則:讓雲成為 AI 時代的成長引擎,而不是單純的基礎設施。」關於國泰的未來雲端布局,顏勝豪如是總結。

國泰金控 雲端策略發展部 協理|顏勝豪 Otto Yen
圖/ 數位時代

以雲端為 AI 資源引擎、發揮數據燃料價值,實現 AI 賦能業務應用

國泰不僅在2025年完成集團百套系統上雲,也啟動數據上雲計畫並為 GenAI 奠定基礎建設。
例如國泰金控實現數據上雲,打造資料湖倉與 GAIA 生態系統架構為 AI 賦能業務做準備:成立國泰風險聯防中心(CRC)攜手集團洗防人員強化風險控管與金融犯罪因應能力;釋出國泰員工 AI 助手–Agia–Beta
版,提供差勤、福利與權益、技術支援、職務職能與集團其他資訊等五大類別管理辦法等查詢服務;此外,亦推出集團數據共享平台、集團法規知識庫、 AI 評測中心等服務,更好發揮 Cloud First 與 AI 賦能業務應用的價值。
雲端是 AI 時代的關鍵底座、數據則是 AI 的燃料。顏勝豪指出,發展AI需要龐大的 GPU 算力,若自建 GPU 機房,不僅硬體設備昂貴、折舊速度快,光是散熱系統一年就高達兩、三千萬元的成本,若採取雲端資源,可以隨啟隨用,同時,大幅降低試錯成本。「當雲端打好基礎、AI成為能力模組,銀行、人壽、產險與證券的創新不再是單點突破,而是放大集團級綜效。」

國泰以 Cloud First + AI 持續領先市場、形塑未來樣貌

「雲端可以優化算力成本,資料則決定 AI 應用上限。」顏勝豪解釋,在 AI 新世代,AI 模型定調能力「下限」,集團子公司掌握的「獨特資料」則決定應用的「上限」,考量雲端有許多好用 AI 服務,唯有資料上雲才能發揮數據價值、用 AI 賦能集團各子公司業務。
例如國泰世華銀行將採取多公有雲策略,打造雲端智慧生態圈,並以現代化雲原生技術拓展應用場景;同時,運用 AI 與資料分析優化客戶服務體驗,並藉由跨雲整合機制支援多元業務模式,以充分發揮上雲效益。至於國泰產險,不僅在兩年半內完成13套核心系統上雲、優化營運流程,如以 Serverless 架構打造百萬級效果、萬元成本的短網址系統等,讓雲端成為產險驅動長期成長的核心引擎與標準配備。

國泰人壽則是透過雲端與 AI 滿足不同客戶需求,如以 AI Search 精準呈現關鍵字搜尋結果,讓客戶可以精準且快速的查找所需資料、大幅優化官網體驗與滿意度。至於國泰證券則是於2026年初推出「庫存管家」服務,以客戶持股為核心,應用 AI 技術打造個人化推播服務,協助投資人更有效率地掌握庫存狀況,提供更即時、系統化的投資管理體驗。
總的來說,國泰金控在集團的雲端轉型不僅是技術升級,更是思維革新,從百套系統上雲進展到 Cloud First 階段,可以預期在雲地基礎下,國泰將進一步引領 AI 時代變革,持續提升營運韌性與放大創新價值。

註1:Cathay 6R 國泰設計 Cathay 6R 雲端遷移方法論,將系統遷移方式依據上雲模式、系統開發成本分為 Rehost 、Replatform、Refactor、Rewrite、Replace 和 Retain 共6種遷移架構,並能對應到 IaaS、PaaS、SaaS 三種不同上雲模式。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
2026 大重啟
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓