美國直擊|亞馬遜推企業級聊天機器人Q,劍指微軟Copilot!更新千個Java App只要2天
美國直擊|亞馬遜推企業級聊天機器人Q,劍指微軟Copilot!更新千個Java App只要2天

AWS年度技術大會re:Invent 2023登場,拉斯維加斯現場擠進5萬名參加者,所有眼光都聚焦在這家雲端龍頭大廠的生成式AI成績單,推出哪些產品和最大競爭對手微軟較勁。

AWS端出多項生成式AI技術,從最底層自研AI訓練晶片等基礎建設,到協助模型調校、開發的聊天機器人,並且強調專門針對企業客戶開發,保障安全性,也更符合工作使用的需求,大螢幕甚至直接秀出微軟「不安全」的文章,叫陣意味濃厚。

AWS大酸微軟
AWS直接現場秀出微軟的安全性問題報導,強調自家聊天機器人更適合企業使用,火藥味十足。
圖/ AWS Community Hero - Ernest Chiang

為了強調AI的重要性,AWS執行長亞當‧謝利普斯基(Adam Selipsky)也一改過去開幕演說以「太空、深海、南極、想像世界」等詩意的分類方式,這次直接將生成式AI切成「基礎建設、模型工具、應用程式」三大層,以此為基礎展開整場發布會,強調AWS從裡到外都準備好提供生成式AI技術的決心。

《數位時代》也前進拉斯維加斯現場,直擊AWS最新動向。

AWS reinvent 2023
AWS reinvent 2023 在拉斯維加斯威尼斯人飯店盛大舉行。
圖/ 隋昱嬋攝影

一、應用層:聊天機器人真的來了!「Amazon Q」號稱企業專家

手握龐大資料的AWS終於也推出自家的聊天機器人「Amazon Q」,正式和對手微軟Copilot、Goolge Bard功能競爭,不過Q最大的差異在於,這款聊天機器人鎖定的是企業客戶,亞當更直言:「大部分公司推出的聊天機器人都無法在工作中順利應用,因為它不懂你的公司,也不知道你在工作中的習慣。」

AWS CEO Adam Selipsky2.jpg
AWS推出企業專用聊天機器人Amazon Q。
圖/ AWS

Amazon Q專門鎖定企業應用,可以在完全安全、封閉的環境下學習公司系統裡的資料,讓Q了解所有正在運行的Project名稱、內容、會議紀錄等資料,了解你在做什麼事,也知道你在工作中的角色,成為專屬的「業務專家」(Business Expert)。

針對IT人員,可以用聊天機器人提供程式語言的建議,甚至能在一聲令下,幫忙排除網路問題、或者自動更新Java程式語言,而且速度飛快,1000個Java App只要用2天就能更新完成,這在過去需要花好幾個月的時間,這項功能一秀出,獲得現場開發者如雷掌聲。

至於其他行銷、業務等各部門的成員,也可以詢問Q業務上的問題,例如哪些功能會造成客戶最多的困難?Q會在幾秒內把自然語言轉成指令,掃瞄企業資料後快速回答,甚至請Q直接做出一份圖表報告,並且持續用聊天機器人快速調整內容,例如文字更長一些、把圖表換成其他更鮮豔的色彩等。

AWS Amazon Q
AWS Amazon Q 介面如畫面右邊的灰色聊天室,可以詢問公司內業務相關問題。
圖/ 隋昱嬋攝影

亞當強調,Amazon Q是市面上完全鎖定工作需求的聊天機器人,並且是能夠實際進行更新等動作的助手,並非只是提供建議。 會中更「砲火十足」秀出微軟內部限制員工使用ChatGPT的新聞,強調自家的安全性更勝對手。

二、模型工具層:聊天機器人幫你挑模型、把關訓練資料

在中間層,AWS強調提供最適合的模型和好用的工具。亞當指出,企業最大的煩惱其實是「怎麼選擇適合自己的模型」,這點也能用生成式AI來提供解方。

聊天機器人Agents協助挑模型、提供指引

在能夠訓練、調校AI的平台Bedrock中推出聊天機器人助手「Agents」,開發者可以用自然語言詢問,獲得四大類的支援,即使是非專家也能完成複雜的AI模型任務,AWS強調這項工具不只是提供指引,甚至可以代替你直接執行任務。

1.協助挑選模型:可以告訴Agents自己的模型需求,請它幫忙推薦平台中最適合的模型。
2.提供簡單的操作指引:不知道下一步怎麼做的時候,也可以詢問Agents提供步驟和指引。
3.客製化運算資源:請Agents幫忙把Lambda運算功能依照自己的需求調整。
4.幫忙挑選相關的數據:請Agents在各個部門或不同來源的數據中挑出和需求最相關的,方便後續應用數據。

AWS reinvent 2023 Agents
Agents助手可以幫忙進行多種功能的建議,甚至直接動手做。
圖/ 隋昱嬋攝影

推「AI護欄」讓企業自己把關、避免AI幻覺

至於企業使用生成式AI最害怕的就是「幻覺」或者輸出錯誤、不良資訊,導致企業形象受損,為此AWS也推出新功能AI Guardrails(AI護欄),企業可以自行用自然語言下指令,讓護欄協助擋下敏感資料或者有害的資訊,避免AI「學壞」,例如銀行客服的應用,在輸入端請護欄自動擋下歧視用語、冒犯言論等資料,輸出端則請機器人不要提供投資建議,避免爭議發生。

Anthropic正式選邊站

AWS母公司亞馬遜(Amazon)今年以史上最大手筆的40億美元,投資生成式AI新創Anthropic,並且使AWS成為Anthropic主要的雲端服務平台提供者,並透過AWS客製化晶片加快Anthropic的運算效能。

這也代表OpenAI的最大競爭對手Anthropic正式「站隊」亞馬遜,成為AWS AI服務的一部份,Anthropic的大型語言模型Claude已經加入AWS AI代管平台Bedrock,未來AWS客戶可以用Anthropic的底層模型來客製化、微調成自己想要的樣子。

延伸閱讀:亞馬遜40億投資OpenAI對手,力抗微軟、Google!這家新創什麼來頭?

AWS reinvent 2023 Anthropic
Anthropic 創辦人暨執行長Dario Amodei來到AWS re:Invent活動現場助陣。
圖/ 隋昱嬋攝影
Anthropic 創辦人暨執行長Dario Amodei
Anthropic 創辦人暨執行長Dario Amodei
圖/ 隋昱嬋攝影

三、基礎建設層:自研AI訓練晶片和處理器助攻模型效能

作為市佔超過6成的雲端龍頭,遍布全球的大量資料中心和可用區域就是對手最難匹敵的一大先天優勢,AWS在會中號稱比競爭對手多出3倍的資料中心、60%的服務量和40%的功能,除了數量取勝外,AWS同時強調自家研發的多款處理器和加速器可以達到最佳的效能表現,同時降低能量耗損。

自研晶片處理器

由於生成式AI訓練所需要的龐大工作量,企業客戶最頭痛的就是運算時的成本問題,尤其是購買GPU資源所投入的資金,和訓練時間長短的拉扯,每家公司想要又快又便宜的方案坐擁生成式AI技術,這點必須靠更強大的晶片處理器能力達成。而在亞馬遜、微軟和谷歌這三家中,亞馬遜是唯一一家在伺服器中提供兩種類型晶片:標準計算晶片和訓練、推理模型專用晶片的雲端提供商。

AWS本次不意外地在大會中宣布推出下一代AWS自研的晶片系列——AI訓練晶片AWS Trainium2和處理器Graviton4,專門針對客戶在雲端工作的「性價比」和「能源效率」兩大需求提供服務。

1.AI訓練晶片Trainium2
專門為訓練AI模型設計的晶片,可以在極短時間內訓練出大型語言模型,第二代訓練速度比上一代快4倍,能源效率也提高2倍。

2.ARM架構處理器Graviton4
AWS在短短五年內推出的第四代處理器,能夠利用AWS在雲端解決方案中累積的「知識」,幫客戶做出最省資源的運算和工作量分配。第4代和當前一代相比運算效能提高了 30%,核心數量增加了50%,記憶體頻寬也增加了 75%。

AWS Adam Selipsky Graviton4.jpg
AWS 發表處理器 Graviton4,強調性價比和能耗優化。
圖/ AWS

NVIDIA深度合作:聯手打造AI超級電腦、推模型訓練服務

最近行程滿檔的NVIDIA執行長黃仁勳親自站台,宣布雙方進一步的合作。

1. Project Ceiba:史上最大、全球最快的AI超級電腦
由AWS和NVIDIA聯手設計且正在進行的專案,在這台超級電腦中將一口氣配置多達1.6萬顆NVIDIA GH200超級晶片,能處理65 exaflops速度等級的AI運算,黃仁勳強調,這等於把65台超級電腦集結在一起的強大力量,是史上最大規模的系統。

2.NVIDIA DGX Cloud:AI訓練即服務(AI-training-as-a-service)方案
雙方聯手推出的方案,能加速高達1兆參數的生成式AI和大型語言模型訓練。黃仁勳指出,因為AWS獨家的Nitro系統,才讓NVIDIA可以一次可以把32顆H100 GPU結合在一台虛擬機內,幫助開發者可以一次使用到最大量的資源。

AWS NVIDIA.jpg
NVIDIA執行長黃仁勳(右)到AWS re:Invent現場共同發表新合作服務。
圖/ AWS

AWS鎖定企業市場的軍火展示

自從生成式AI大戰開打,過去居市場領導地位的亞馬遜和AWS在這一年裡相對低調,當對手不斷拋出產品和服務時,AWS僅做出Anthropic投資的大動作。

因此年末登場的re:Invent成為一場軍火展示,AWS圍繞著生成式AI拋出大量技術更新,並推出企業專用新產品應戰,鎖定對手微軟、OpenAI、Google等公司一直覬覦的企業市場推出服務,希望成功搶下客戶的心。

責任編輯:蘇祐萱

關鍵字: #亞馬遜 #AWS
本網站內容未經允許,不得轉載。
往下滑看下一篇文章
全球最佳!中國附醫積極打造安全智慧醫院,亮眼表現獲 HIMSS肯定
全球最佳!中國附醫積極打造安全智慧醫院,亮眼表現獲 HIMSS肯定

為提供以病患為核心的醫療照護服務,中國醫藥大學附設醫院(以下簡稱中國附醫)早在數年前就展開智慧醫院布局,並獲得國內外獎項肯定、創下許多台灣第一。舉例來說,中國附醫不僅連續完成美國醫療資訊與管理系統學會(HIMSS)的 INFRAM Stage7認證、EMRAM Stage7認證、AMAM Stage6認證並獲得亞洲首座HIMSS Davies Award of Excellence大獎,更進一步獲得HIMSS「數位健康指標(Digital Health Indication,DHI)」全球最高成績殊榮。

中國附醫是如何辦到的?

中國醫藥大學附設醫院資訊副院長陳俊良面帶微笑的說:「在蔡長海董事長以及周德陽院長高瞻遠矚領導下,我們早在2021年就擘劃清楚的智慧醫療藍圖,還有專職單位負責各項工作,此外,還可以彈性因應業務需求敏捷展開跨部門合作。」舉例來說,在數據管理與應用這個領域,資訊室負責臨床醫療數據資料的蒐集,大數據中心則肩負巨量數據挖掘與應用,至於人工智慧中心則是將人工智慧技術應用到智慧醫療各個領域的關鍵推手。「在實踐智慧醫院這個旅程中,資訊室肩負數據治理重責,必須從(醫護)需求面、(數據)來源面、(安全/隱私)技術面等構面進行規劃與啟動相關實務。」

自由系統
圖/ 自由系統

從身分驗證管理到內部通訊,自由系統助中國附醫深化安全防護力

為發揮醫療數據的最大價值,中國附醫尤其重視資訊安全防禦,陳俊良表示:「第一前提是合規、因應資安法優化系統、數據、裝置設備與人員的安全性。」具體作法有二:首先是因應資安法以縱深防禦的方式持續強化對私有雲環境與設備的安全管理;其次是加強整體資安可視性與自由系統合作,由其協助導入微軟各項的解決方案,並提供資安監測與即時異常通報等服務,讓中國附醫可以更具效率與效能的方式過濾與發現異常事件。

中國醫藥大學附設醫院資訊室系統維護組組長李祥民進一步解釋:「資安威脅無所不在,過去幾年,勒索軟體威脅更是防不勝防,為了解決這個問題,光是保護數據資料還不夠,必須從身份、裝置、帳戶等多元角度切入,因此,微軟在2021年開始提供資安解決方案時,我們就開始評估有能力解決問題的廠商,決定合作廠商的原因有三:首先是原廠推薦,由原廠的角度評估廠商有解決問題的能力,其次是自由系統展現出的專業技術與符合客戶需求的服務;最後,同時也是最重要的是,他們可以提供即時監測並提供通報服務,極大程度緩解中國附醫在資安人力與能力的欠缺,讓我們可以更好的落實安全防護。」

因此,中國附醫順利在2022年導入微軟資安解決方案,而這,不僅提升了中國附醫的資安防護能力,例如分別在2022年跟2023年預先偵測異常事件並成功防堵來自外部的安全攻擊,也讓資訊同仁可以專注在核心業務上,極大化資訊與數據價值。良好的合作體驗也讓雙方合作關係進一步擴展到應用程式端的安全防護,例如,將地面郵件系統搬遷到微軟的雲端服務,藉此降低Email Server的維運成本與損壞風險,同時,優化帳戶登入管理等。

陳俊良表示:「過去幾年,資安威脅不減反增,但是,透過縱深防禦的強化並且經由合作廠商加強即時監控與協助行政通報等服務,我們可以逐步優化資訊安全防護能量,並成功讓異常事件的發生頻率下降,而這,也是中國附醫可以順利獲得HIMSS的INFRAM Stage7跟EMRAM Stage7等認證的關鍵原因之一,為此,後續將持續與合作夥伴共同努力、與時俱進的深化安全防護能力。」

自由系統
圖/ 自由系統

透過雲端身分驗證落實Single Sign On以提升縱深防禦能力

除了導入資安與雲端郵件之外,李祥民表示,中國附醫更於日前將雲端身分驗證跟院內簽核系統的登入機制彙整在一起,以優化登入安全。「接下來,我們會與自由系統合作,重新盤點、評估有哪些院級服務適合以Microsoft Azure AD進行單一登入與多因素驗證,藉此提升安全防護機制。」

自由系統業務經理許廷輔表示,資訊安全不可能一步到位,相反的,需要長期、動態的進行調整與優化,因此,需要組織上下齊心、一同落實安全防禦。「從2021年至今,我們發現,中國附醫不僅重視資訊安全,更身體力行、彈性敏捷的因應潛在威脅做出調整、改變,這是很難能可貴的地方,為進一步擴大成效,自由系統將針對中國附醫在(數據)資料安全與雲端服務等策略提供更多適合中國附醫的產品及服務。」

「智慧醫療、智慧醫院涉及的面向既廣且深,不可能單憑己力完成,需要專業的外部夥伴提供最佳支援與服務,我們很開心可以有自由系統這樣的夥伴,期待未來有更多合作火花,讓中國附醫可以一步一腳印的建構與完善安全智慧醫院布局。」關於中國附醫與自由系統的未來合作,陳俊良如是總結。

自由系統
圖/ 自由系統
本網站內容未經允許,不得轉載。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
台日半導體新局 全解讀
© 2024 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓