誰說AI晶片必輸輝達?AWS晶片靈魂人物揭秘:一支軟硬整合戰隊,如何效能暴增6倍?
誰說AI晶片必輸輝達?AWS晶片靈魂人物揭秘:一支軟硬整合戰隊,如何效能暴增6倍?

隨著生成式AI浪潮席捲全球,雲端大廠(CSP)競相投入自研晶片,試圖降低對外部供應商的依賴。

然而,在微軟、Google如火如荼發展的階段,雲端產業龍頭亞馬遜(AWS)已經領先多年,最早可追溯到2013年,至今已打造出標準運算、推理、訓練、伺服器晶片等四大產品線,組成穩固的基礎建設帝國。

這四大產品線背後團隊的掌舵者,是AWS副總裁暨傑出工程師、以色列晶片設計公司Annapurna Labs共同創辦人納菲亞‧畢沙拉(Nafea Bshara)。

畢沙拉在2011年創辦Annapurna Labs,隨後在2015年被亞馬遜以約3.5億美元收購,以快速強化AWS發展自研晶片的實力。

AWS副總裁暨傑出工程師、同時也是以色列晶片設計公司Annapurna Labs共同創辦人納菲亞‧畢
AWS副總裁暨傑出工程師、同時也是以色列晶片設計公司Annapurna Labs共同創辦人納菲亞‧畢沙拉(Nafea Bshara)
圖/ 隋昱嬋攝影

而畢沙拉在今年re:Invent大會期間首度接受包含《數位時代》在內的台灣媒體團訪,半開玩笑地表示「我們AWS貢獻了台灣GDP的一大部分!」不只是台積電前五大客戶之一,更點出與鴻海(Foxconn)、廣達(Quanta)、智邦(Accton)等台灣大廠緊密合作。

同時,他針對外界好奇的自研晶片優勢、手上最Trainium晶片路線圖,以及與輝達(NVIDIA)之間微妙的競合關係,在訪問中一一解答。

AWS旗下四大晶片系列:

Nitro(加速): 2013年推出,用來處理I/O與安全功能的晶片。目前已演進至第七代,全球有超過2千萬台伺服器搭載,是AWS最暢銷的產品。
Graviton(運算): 2018年推出,基於ARM架構的CPU。最新第五代單顆擁有多達192核心,全球已部署超過200萬顆,服務超過5萬名客戶。
Inferentia(推論): 2019年推出,專攻AI模型預測。第二代產品採用台積電5奈米製程,延遲降低高達10倍。
Trainium(訓練):2022年推出,專攻AI模型訓練。最新的Trainium 3是業界首款3奈米雲端AI晶片。

解密1:AWS的「軟硬混血」戰隊,如何打破效能天花板?

談起目前市場開始白熱化的自研晶片競爭,「每個人(每家公司)都有野心、都想做客製化晶片,但有多少真的能做到的?」畢沙拉指出AWS的優勢在於,不只是市場中少見的玩家,更早在2011年就看見趨勢並開始布局,至今已是一段長達14年的旅程。

他強調,這段時間的累積讓AWS擁有強大的垂直整合能力,軟體團隊甚至在晶片投片前(Tape-out)就能開始測試,「這能讓我們省下12到24個月的上市時間。」這種速度,以AWS的規模而言,意味著數百億美元的價值,而且能更安全、更快地獲得客戶的回饋。

除了買到時間,軟硬體深度整合,也讓AWS的晶片達到競爭者難以匹敵的成果。畢沙拉透露,在Annapurna實驗室裡,負責寫晶片RTL(暫存器傳輸級)代碼的硬體工程師,同時也深諳軟體運作;甚至第一線維運資料中心的人員,也會回頭參與晶片設計。這種打破硬體設計、軟體開發與維運邊界的「混血」模式,讓他們能第一手掌握客戶在真實場景下的痛點,並迅速修正,這是傳統晶片供應商難以複製的優勢。

亞馬遜AWS晶片設計4.jpg
AWS晶片設計部門。
圖/ Amazon

舉例來說,AWS針對AI訓練打造的Trainium 3晶片,是今年發布會的焦點,大會中強調不只能訓練,甚至也能進行龐大運算的「推論」。畢沙拉也點出,從Trainium 1到Trainium 2,效能提升了4倍;從Trainium 2到Trainium 3,效率提升了5倍,而明年即將公開的下一代Trainium 4,效能可望再提升6倍。

「一般晶片每一代升級頂多提升30%,我們卻可以做到4倍甚至6倍。」畢沙拉表示,這種「違反常理」的爆發性成長,光靠台積電的先進製程或記憶體升級是撐不起來的。

雖然根據摩爾定律,晶片上的電晶體數量約每兩年會增加一倍,效能也理應隨之翻倍,但先進製程近年逼近物理極限,單靠製程紅利帶來的效能提升,通常只剩20%至30%,要突破這數字,就必須從「架構層面」來突破,這正是AWS的強項。

他解釋,市場常誤將Trainium視為ASIC(特殊應用積體電路/Application Specific Integrated Circuit),也就是為特定用途量身打造的客製化晶片,但ASIC往往是針對特定演算法「固化」,一旦AI模型改變就難以適應。而Trainium本質上更像是「可程式化處理器」,擁有如同GPU般的靈活性,這意味著它不僅能處理當下的任務,還能透過軟體定義去適應未來的AI變化,這正是它能突破硬體限制、持續大幅躍進的關鍵。

畢沙拉指出,這意味著即便未來AI主流架構改變,Trainium依然能支援,不會面臨硬體被軟體淘汰的窘境。「只要你支援PyTorch,所有的模型都能在我們的晶片上運作,」他自信地說 。

AWS自研晶片Trainium3
AWS在現場秀出自研晶片Trainium3的本體。
圖/ 隋昱嬋攝影

解密2:與輝達「亦敵亦友」的哲學、連蘋果都離不開的關鍵技術

AWS坐擁四大自研晶片陣容,與AI晶片霸主輝達既競爭又合作的「瑜亮情結」,一直受到外界關注。

不過談起和輝達的關係,畢沙拉只是不假思索地回答:「超級好(Super good)!」他強調,AWS的哲學是提供「選擇」,如同在亞馬遜網站上買衣服,「你可以買紅襯衫、也可以買藍襯衫。在AWS的平台上,你可以買到NVIDIA GPU,也可以買我們自己的Trainium。」。

而雙方的技術合作確實相當緊密,Trainium晶片使用了NVIDIA的NVLink技術,而NVIDIA的GPU在AWS雲端運作時,底層也依賴AWS的Nitro系統,稱得上是一場共生關係。畢沙拉也強調,AWS不會替客戶做決定,而是提供多樣化的選項,讓客戶根據需求自己搭配。

AWS NVIDIA.jpg
輝達執行長黃仁勳曾為AWS re:Invent站台。
圖/ AWS

除了輝達,另一位夥伴蘋果(Apple)的關係也相當耐人尋味,極少出席「友商」發布會活動的蘋果,罕見二度為AWS出席站台,畢沙拉指出,蘋果不僅是AWS自研處理器Graviton的大用戶,去年也曾測試過Trainium晶片。

更關鍵的是,AWS是目前市面上唯一能提供「Mac雲端實例(Mac instances)」的雲端供應商,讓開發者能在雲端上使用從M1到M4的Mac電腦資源。畢沙拉揭密,這項獨門生意完全歸功於Nitro晶片,「因為Mac非常安全且封閉,如果沒有Nitro卡作為中介層處理安全與I/O,我們根本無法將Mac整合進資料中心。」這也證明了AWS基礎設施的技術,能讓蘋果買單多年的關鍵。

#5 AWS re:Invent
蘋果罕見連續兩年為AWS站台。
圖/ 隋昱嬋攝影

透過自研晶片降低成本,加上和輝達、蘋果等巨頭強強聯手,AWS在這場生成式AI的馬拉松中的目標是,確保自己永遠是客戶眼中難以替代,且最多元化的基礎設施。

關鍵字: #雲端 #晶片 #AWS
往下滑看下一篇文章
數位時代 X 國泰金控 從百套系統上雲到 Cloud First:國泰如何把雲端變成AI成長引擎?
數位時代 X 國泰金控 從百套系統上雲到 Cloud First:國泰如何把雲端變成AI成長引擎?

2019年金融監理機關正式將雲端納入委外規範後,揭示金融業上雲時代來臨,國泰金控數數發中心成立雲端策略發展部,負責擬定集團上雲策略,並於2020年正式啟動7年集團雲端轉型計畫;在多數金融機構仍停留在單點遷移或IT現代化的現下,國泰金融集團在 2025 年即完成 100 套系統上雲,更將雲端轉型階段從 Cloud Ready、Cloud Adoption 推向 Cloud First,成為數據與人工智慧應用的關鍵引擎。

國泰金控資訊長|吳建興 James Wu
圖/ 數位時代

「百套系統上雲不僅僅是數字,更是讓國泰從『 IT 進化業務』邁向『 IT 驅動成長』的關鍵轉折。」國泰金控雲端策略發展部協理顏勝豪表示,上雲帶來的效益十分顯著,包括提升資源可用性與營運敏捷度、減輕 IT 維運負擔;同時,雲端業者多具備零碳排或綠能機房機制,亦有助於企業朝向 ESG 永續營運邁進。「金融上雲不是單純的現代化基礎設施或者是升級技術,而是為了換取速度與可靠度,讓集團可以加速創新腳步、彈性調配資源,以及培育所需人才與技能,為未來做最佳準備。」
為讓集團員工、金融同業以及有志上雲的夥伴可以進一步探討雲端轉型的各種可能,國泰金控舉辦雲端轉型成果發表會,會中除有集團子公司分享最新成果,三大公有雲平台業者也從不同技術視角共同探討在合規、資安與 AI 應用的可能。

七年、三階段,國泰金融集團將雲端內化為營運流程與創新引擎

國泰金控科技長|姚旭杰 Marcus Ya
圖/ 數位時代

為什麼國泰可以領先市場完成雲端轉型、數據與 AI 賦能業務?

顏勝豪認為,雲端轉型的起點不是直接遷移系統,而是從四個面向打底:應用系統盤點評估、雲端架構設計、雲端遷移藍圖規劃,以及組織治理框架建立,而這也是 Cloud Ready 階段最重要的事情。
「不同子公司有不同商業模式與節奏,若沒有共同語言與平台底座,上雲很容易各自為政。」顏勝豪表示,為讓所有員工可以齊步前行,國泰以雲端遷移方法論 Cathay 6R(註1)作為共同語言、用平台作為共同底座,讓轉型不只是技術選擇,而是集團行動。
完成單一系統的雲端遷移後,便進入 Cloud Adoption 階段。在這個階段中,要透過大規模遷移建立更成熟的上雲標準作業流程(SOP),透過 FinOps 機制控管與優化雲端營運成本,以及透過自動化與治理模型確認多雲環境與安全與維運穩定性,目標是將雲端內化為組織日常運營的一部分,進而邁向 Cloud First 階段:在合規前提下,新專案與系統升級預設在雲端環境開發,並善用雲原生優勢加速新產品功能開發速度。
「集團雲端策略只有一個核心原則:讓雲成為 AI 時代的成長引擎,而不是單純的基礎設施。」關於國泰的未來雲端布局,顏勝豪如是總結。

國泰金控 雲端策略發展部 協理|顏勝豪 Otto Yen
圖/ 數位時代

以雲端為 AI 資源引擎、發揮數據燃料價值,實現 AI 賦能業務應用

國泰不僅在2025年完成集團百套系統上雲,也啟動數據上雲計畫並為 GenAI 奠定基礎建設。
例如國泰金控實現數據上雲,打造資料湖倉與 GAIA 生態系統架構為 AI 賦能業務做準備:成立國泰風險聯防中心(CRC)攜手集團洗防人員強化風險控管與金融犯罪因應能力;釋出國泰員工 AI 助手–Agia–Beta
版,提供差勤、福利與權益、技術支援、職務職能與集團其他資訊等五大類別管理辦法等查詢服務;此外,亦推出集團數據共享平台、集團法規知識庫、 AI 評測中心等服務,更好發揮 Cloud First 與 AI 賦能業務應用的價值。
雲端是 AI 時代的關鍵底座、數據則是 AI 的燃料。顏勝豪指出,發展AI需要龐大的 GPU 算力,若自建 GPU 機房,不僅硬體設備昂貴、折舊速度快,光是散熱系統一年就高達兩、三千萬元的成本,若採取雲端資源,可以隨啟隨用,同時,大幅降低試錯成本。「當雲端打好基礎、AI成為能力模組,銀行、人壽、產險與證券的創新不再是單點突破,而是放大集團級綜效。」

國泰以 Cloud First + AI 持續領先市場、形塑未來樣貌

「雲端可以優化算力成本,資料則決定 AI 應用上限。」顏勝豪解釋,在 AI 新世代,AI 模型定調能力「下限」,集團子公司掌握的「獨特資料」則決定應用的「上限」,考量雲端有許多好用 AI 服務,唯有資料上雲才能發揮數據價值、用 AI 賦能集團各子公司業務。
例如國泰世華銀行將採取多公有雲策略,打造雲端智慧生態圈,並以現代化雲原生技術拓展應用場景;同時,運用 AI 與資料分析優化客戶服務體驗,並藉由跨雲整合機制支援多元業務模式,以充分發揮上雲效益。至於國泰產險,不僅在兩年半內完成13套核心系統上雲、優化營運流程,如以 Serverless 架構打造百萬級效果、萬元成本的短網址系統等,讓雲端成為產險驅動長期成長的核心引擎與標準配備。

國泰人壽則是透過雲端與 AI 滿足不同客戶需求,如以 AI Search 精準呈現關鍵字搜尋結果,讓客戶可以精準且快速的查找所需資料、大幅優化官網體驗與滿意度。至於國泰證券則是於2026年初推出「庫存管家」服務,以客戶持股為核心,應用 AI 技術打造個人化推播服務,協助投資人更有效率地掌握庫存狀況,提供更即時、系統化的投資管理體驗。
總的來說,國泰金控在集團的雲端轉型不僅是技術升級,更是思維革新,從百套系統上雲進展到 Cloud First 階段,可以預期在雲地基礎下,國泰將進一步引領 AI 時代變革,持續提升營運韌性與放大創新價值。

註1:Cathay 6R 國泰設計 Cathay 6R 雲端遷移方法論,將系統遷移方式依據上雲模式、系統開發成本分為 Rehost 、Replatform、Refactor、Rewrite、Replace 和 Retain 共6種遷移架構,並能對應到 IaaS、PaaS、SaaS 三種不同上雲模式。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
2026 大重啟
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓