美國直擊|亞馬遜推企業級聊天機器人Q,劍指微軟Copilot!更新千個Java App只要2天
美國直擊|亞馬遜推企業級聊天機器人Q,劍指微軟Copilot!更新千個Java App只要2天

AWS年度技術大會re:Invent 2023登場,拉斯維加斯現場擠進5萬名參加者,所有眼光都聚焦在這家雲端龍頭大廠的生成式AI成績單,推出哪些產品和最大競爭對手微軟較勁。

AWS端出多項生成式AI技術,從最底層自研AI訓練晶片等基礎建設,到協助模型調校、開發的聊天機器人,並且強調專門針對企業客戶開發,保障安全性,也更符合工作使用的需求,大螢幕甚至直接秀出微軟「不安全」的文章,叫陣意味濃厚。

AWS大酸微軟
AWS直接現場秀出微軟的安全性問題報導,強調自家聊天機器人更適合企業使用,火藥味十足。
圖/ AWS Community Hero - Ernest Chiang

為了強調AI的重要性,AWS執行長亞當‧謝利普斯基(Adam Selipsky)也一改過去開幕演說以「太空、深海、南極、想像世界」等詩意的分類方式,這次直接將生成式AI切成「基礎建設、模型工具、應用程式」三大層,以此為基礎展開整場發布會,強調AWS從裡到外都準備好提供生成式AI技術的決心。

《數位時代》也前進拉斯維加斯現場,直擊AWS最新動向。

AWS reinvent 2023
AWS reinvent 2023 在拉斯維加斯威尼斯人飯店盛大舉行。
圖/ 隋昱嬋攝影

一、應用層:聊天機器人真的來了!「Amazon Q」號稱企業專家

手握龐大資料的AWS終於也推出自家的聊天機器人「Amazon Q」,正式和對手微軟Copilot、Goolge Bard功能競爭,不過Q最大的差異在於,這款聊天機器人鎖定的是企業客戶,亞當更直言:「大部分公司推出的聊天機器人都無法在工作中順利應用,因為它不懂你的公司,也不知道你在工作中的習慣。」

AWS CEO Adam Selipsky2.jpg
AWS推出企業專用聊天機器人Amazon Q。
圖/ AWS

Amazon Q專門鎖定企業應用,可以在完全安全、封閉的環境下學習公司系統裡的資料,讓Q了解所有正在運行的Project名稱、內容、會議紀錄等資料,了解你在做什麼事,也知道你在工作中的角色,成為專屬的「業務專家」(Business Expert)。

針對IT人員,可以用聊天機器人提供程式語言的建議,甚至能在一聲令下,幫忙排除網路問題、或者自動更新Java程式語言,而且速度飛快,1000個Java App只要用2天就能更新完成,這在過去需要花好幾個月的時間,這項功能一秀出,獲得現場開發者如雷掌聲。

至於其他行銷、業務等各部門的成員,也可以詢問Q業務上的問題,例如哪些功能會造成客戶最多的困難?Q會在幾秒內把自然語言轉成指令,掃瞄企業資料後快速回答,甚至請Q直接做出一份圖表報告,並且持續用聊天機器人快速調整內容,例如文字更長一些、把圖表換成其他更鮮豔的色彩等。

AWS Amazon Q
AWS Amazon Q 介面如畫面右邊的灰色聊天室,可以詢問公司內業務相關問題。
圖/ 隋昱嬋攝影

亞當強調,Amazon Q是市面上完全鎖定工作需求的聊天機器人,並且是能夠實際進行更新等動作的助手,並非只是提供建議。 會中更「砲火十足」秀出微軟內部限制員工使用ChatGPT的新聞,強調自家的安全性更勝對手。

二、模型工具層:聊天機器人幫你挑模型、把關訓練資料

在中間層,AWS強調提供最適合的模型和好用的工具。亞當指出,企業最大的煩惱其實是「怎麼選擇適合自己的模型」,這點也能用生成式AI來提供解方。

聊天機器人Agents協助挑模型、提供指引

在能夠訓練、調校AI的平台Bedrock中推出聊天機器人助手「Agents」,開發者可以用自然語言詢問,獲得四大類的支援,即使是非專家也能完成複雜的AI模型任務,AWS強調這項工具不只是提供指引,甚至可以代替你直接執行任務。

1.協助挑選模型:可以告訴Agents自己的模型需求,請它幫忙推薦平台中最適合的模型。
2.提供簡單的操作指引:不知道下一步怎麼做的時候,也可以詢問Agents提供步驟和指引。
3.客製化運算資源:請Agents幫忙把Lambda運算功能依照自己的需求調整。
4.幫忙挑選相關的數據:請Agents在各個部門或不同來源的數據中挑出和需求最相關的,方便後續應用數據。

AWS reinvent 2023 Agents
Agents助手可以幫忙進行多種功能的建議,甚至直接動手做。
圖/ 隋昱嬋攝影

推「AI護欄」讓企業自己把關、避免AI幻覺

至於企業使用生成式AI最害怕的就是「幻覺」或者輸出錯誤、不良資訊,導致企業形象受損,為此AWS也推出新功能AI Guardrails(AI護欄),企業可以自行用自然語言下指令,讓護欄協助擋下敏感資料或者有害的資訊,避免AI「學壞」,例如銀行客服的應用,在輸入端請護欄自動擋下歧視用語、冒犯言論等資料,輸出端則請機器人不要提供投資建議,避免爭議發生。

Anthropic正式選邊站

AWS母公司亞馬遜(Amazon)今年以史上最大手筆的40億美元,投資生成式AI新創Anthropic,並且使AWS成為Anthropic主要的雲端服務平台提供者,並透過AWS客製化晶片加快Anthropic的運算效能。

這也代表OpenAI的最大競爭對手Anthropic正式「站隊」亞馬遜,成為AWS AI服務的一部份,Anthropic的大型語言模型Claude已經加入AWS AI代管平台Bedrock,未來AWS客戶可以用Anthropic的底層模型來客製化、微調成自己想要的樣子。

延伸閱讀:亞馬遜40億投資OpenAI對手,力抗微軟、Google!這家新創什麼來頭?

AWS reinvent 2023 Anthropic
Anthropic 創辦人暨執行長Dario Amodei來到AWS re:Invent活動現場助陣。
圖/ 隋昱嬋攝影
Anthropic 創辦人暨執行長Dario Amodei
Anthropic 創辦人暨執行長Dario Amodei
圖/ 隋昱嬋攝影

三、基礎建設層:自研AI訓練晶片和處理器助攻模型效能

作為市佔超過6成的雲端龍頭,遍布全球的大量資料中心和可用區域就是對手最難匹敵的一大先天優勢,AWS在會中號稱比競爭對手多出3倍的資料中心、60%的服務量和40%的功能,除了數量取勝外,AWS同時強調自家研發的多款處理器和加速器可以達到最佳的效能表現,同時降低能量耗損。

自研晶片處理器

由於生成式AI訓練所需要的龐大工作量,企業客戶最頭痛的就是運算時的成本問題,尤其是購買GPU資源所投入的資金,和訓練時間長短的拉扯,每家公司想要又快又便宜的方案坐擁生成式AI技術,這點必須靠更強大的晶片處理器能力達成。而在亞馬遜、微軟和谷歌這三家中,亞馬遜是唯一一家在伺服器中提供兩種類型晶片:標準計算晶片和訓練、推理模型專用晶片的雲端提供商。

AWS本次不意外地在大會中宣布推出下一代AWS自研的晶片系列——AI訓練晶片AWS Trainium2和處理器Graviton4,專門針對客戶在雲端工作的「性價比」和「能源效率」兩大需求提供服務。

1.AI訓練晶片Trainium2
專門為訓練AI模型設計的晶片,可以在極短時間內訓練出大型語言模型,第二代訓練速度比上一代快4倍,能源效率也提高2倍。

2.ARM架構處理器Graviton4
AWS在短短五年內推出的第四代處理器,能夠利用AWS在雲端解決方案中累積的「知識」,幫客戶做出最省資源的運算和工作量分配。第4代和當前一代相比運算效能提高了 30%,核心數量增加了50%,記憶體頻寬也增加了 75%。

AWS Adam Selipsky Graviton4.jpg
AWS 發表處理器 Graviton4,強調性價比和能耗優化。
圖/ AWS

NVIDIA深度合作:聯手打造AI超級電腦、推模型訓練服務

最近行程滿檔的NVIDIA執行長黃仁勳親自站台,宣布雙方進一步的合作。

1. Project Ceiba:史上最大、全球最快的AI超級電腦
由AWS和NVIDIA聯手設計且正在進行的專案,在這台超級電腦中將一口氣配置多達1.6萬顆NVIDIA GH200超級晶片,能處理65 exaflops速度等級的AI運算,黃仁勳強調,這等於把65台超級電腦集結在一起的強大力量,是史上最大規模的系統。

2.NVIDIA DGX Cloud:AI訓練即服務(AI-training-as-a-service)方案
雙方聯手推出的方案,能加速高達1兆參數的生成式AI和大型語言模型訓練。黃仁勳指出,因為AWS獨家的Nitro系統,才讓NVIDIA可以一次可以把32顆H100 GPU結合在一台虛擬機內,幫助開發者可以一次使用到最大量的資源。

AWS NVIDIA.jpg
NVIDIA執行長黃仁勳(右)到AWS re:Invent現場共同發表新合作服務。
圖/ AWS

AWS鎖定企業市場的軍火展示

自從生成式AI大戰開打,過去居市場領導地位的亞馬遜和AWS在這一年裡相對低調,當對手不斷拋出產品和服務時,AWS僅做出Anthropic投資的大動作。

因此年末登場的re:Invent成為一場軍火展示,AWS圍繞著生成式AI拋出大量技術更新,並推出企業專用新產品應戰,鎖定對手微軟、OpenAI、Google等公司一直覬覦的企業市場推出服務,希望成功搶下客戶的心。

責任編輯:蘇祐萱

關鍵字: #亞馬遜 #AWS
往下滑看下一篇文章
思科:打造智慧轉型韌性基礎的關鍵 人才培育與科技
思科:打造智慧轉型韌性基礎的關鍵 人才培育與科技

人工智慧(AI)正以前所未有的姿態重塑全球政府與企業的數位轉型藍圖,帶來一場深刻的變革。這股浪潮不僅預示著效率與生產力的巨大躍升,同時也為組織帶來嚴峻挑戰。如何駕馭 AI、確保資訊安全、並同時兼顧永續發展,成為當今各國政府與企業亟需面對的核心課題。在這樣一個充滿挑戰與無限機會的時代,全球網路與資安科技大廠思科(Cisco),憑藉其完整的產業生態系和豐富的跨國合作經驗,正積極扮演關鍵的賦能者角色,所推動的台灣數位加速計畫(Taiwan Digital Acceleration, TDA)也已邁入3.0階段。思科認為,值此時刻組織需要為數位轉型建立具韌性的基礎,而關鍵不只是科技,更重要的是人才培育。

AI雖解決人力短缺問題 但人員更需學習駕馭AI

負責思科國家數位加速計畫(CDA),與多國政府密切合作的思科全球資深副總裁暨全球創新長Guy Diedrich,談到當今各國政府與企業正在面臨融合著AI、資安與永續發展的數位轉型趨勢,而在此過程中關鍵的是,組織必須透過科技與培育人才來為此波轉型打造具韌性的基礎。

思科
思科全球資深副總裁暨全球創新長Guy Diedrich
圖/ 思科

Diedrich進一步表示,未來的職位已不再是用職務說明書來衡量,而是以工作流程為核心,人力會在不同階段介接不同科技,可能是AI、機器人、人形機器人甚至量子電腦,因此人力與科技的整合也特別重要。思科台灣總經理林岳田也舉例,過去在地端、雲端網路設備有各自的管理平台,未來除了將化繁為簡整合為單一平台外,許多資料搜集比對的例行工作由AI取代,但關鍵的決策判斷仍會交由人力負責,因此培育員工學習AI也更加不可或缺。

過去從TDA 1.0計畫推動至今,透過思科網路學院(Cisco Networking Academy),思科與合作夥伴已經在台灣培育超過17萬名技術人才。提供從網路工程師認證(CCNA)、網路高級工程師(CCNP)到網路專家(CCIE)等,針對不同職務與層級完整的專業培訓,而去年剛推出針對AI架構的網路設計專家(CCDE-AI Infrastructure)認證,在市場上更是炙手可熱。Diedrich強調,未來學習將成為工作中的一部份,持續在職訓練才能確保人員跟上技術的快速發展。

林岳田也指出,思科致力於人才培育不遺餘力,並從多方面投注資源。包括目前已在台灣的北、南、東部區域成立思科網路學院教師培訓中心,作為推動各區域人才培訓的種子基地。同時,思科與合作夥伴晉泰科技在2025年於高雄成立「亞灣AIOT生態系發展基地暨研發中心」,目標是培育5,000名AIOT人才並協助 1,500 人取得國際認證,以解決目前產業智慧轉型卻求才若渴的窘境。而在政府公部門方面,思科近期與國家資通安全研究院 (簡稱「資安院」) 合作「NPO資安共學計畫」,由思科網路學院 (Cisco Networking Academy) 提供課程與平台資源,資安院負責在地招募與社群經營,共同構築永續的公益資安生態系。

思科
思科台灣總經理林岳田
圖/ 思科

完整生態系整合多元科技 一同推動AI創新

數位轉型另一項重要關鍵就是科技,尤其當今企業都在思考如何利用AI推動創新。思科與18家合作夥伴,從TDA 1.0到3.0計畫,共同實踐30個創新專案。其中TDA 1.0著重智慧城市、企業 5G專網、資訊安全和數位醫療照護等核心領域,奠定數位轉型基礎;TDA 2.0計畫除了延續並深化前述智慧城市與智慧交通,也因應新冠疫情下的醫療照護需求,為長者提供遠距學習、遠距醫療等樂齡生活應用,同時拓展金融韌性等創新場景。而在離岸風電計畫中,更利用5G結合VR眼鏡解決方案,協助當時因為疫情封控而無法來台支援的國外風機維護工程師,進行遠距教育訓練。

而TDA 3.0計畫中聚焦永續發展、資安韌性和AI驅動的智慧轉型,其中指標性專案之一,便是以高雄港為場域的智慧港口解決方案。提供從貨輪進港到貨櫃卸貨、起重機遠端操作監控等全自動化營運,可提升人員工作效率並確保安全。同時此方案中也兼顧永續發展需求,透過感測器可將各種機具設備的碳排資料回傳,完整監控能源使用情形。

人員短缺不只是運輸業也是許多產業共同面臨的難題,思科與合作夥伴針對醫院推出行動醫療推車,就是利用AIOT、無線/有線網路整合結合Webex視訊系統等,能協助遠端醫師迅速掌握病情,在第一時間提供專業判斷,或協助護理師迅速正確完成數據輸入工作。思科全球副總裁黃志明也強調,科技的運用更重要的是化繁為簡,透過整合算力、網路、資安與儲存功能的AI PODs一體機伺服器,讓許多TDA 3.0專案能專注於應用開發,加速落地部署。

黃志明進一步表示,思科能協助企業導入部署各項AI創新方案,得力於生態系中有擅長應用開發、技術架構、顧問諮詢等不同領域的合作夥伴,彼此在開放、包容的平台上運作,因此能協助企業加速智慧轉型並提升企業價值。

思科
思科全球副總裁黃志明
圖/ 思科

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
蘋果能再次偉大?
© 2025 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓