瞄準物聯網商機,Google新AI晶片Edge TPU跟以往有何不同?
瞄準物聯網商機,Google新AI晶片Edge TPU跟以往有何不同?
2018.07.27 | Google

Google在Google Cloud NEXT 2018活動中宣布推出新AI晶片Edge TPU,這個晶片功能是什麼?和過往的第一代到第三代TPU晶片(又稱為Cloud TPU)哪裡不同呢?

主攻工業物聯網,10月販售開發版套件

根據Google官方部落格資料,Edge TPU是一種低功耗低成本的ASIC晶片,而且體積非常小,小於1美分銅板。ASIC專用晶片和GPU通用晶片比較之下,晶片功耗較低,延遲性也較低,運算效率較高,如Edge TPU在高分辨率影音上可以以每秒30幀的速度,在每幀上同時執行多個AI模型。

另外,Google也將推出Edge TPU開發版套件(module development kit)。其中含有恩智浦CPU、Edge TPU、Wi-Fi功能和加密晶片的開發版在今年10月就會對外販售。

Google也提到Edge TPU將主攻預測性維護、異常檢測、機器視覺、機器人、語音識別等工業物聯網應用場景,除了在工業製造領域,在醫療、零售、智能空間與交通等領域也是用。而LG已經計劃在產品線上使用Edge TPU。

而支援Edge TPU的框架和軟體服務則全都綁定在Google自家的架構之中,打造「封閉的生態系」意圖明顯。希望開發者或企業也會採用Edge TPU後,也會被綁定在Google Cloud服務中。因此在使用上必須搭配Google的 Cloud IoT Edge 軟體,並且針對 TensorFLow 機器學習模型優化。

EdgeTPU新晶片和Google過往推出的TPU晶片不同。Google過往推出的第一代到第三代TPU晶片用途在資料中心,也就是雲端運算的機器學習訓練和推論使用,因此被稱為Cloud TPU,而剛推出的新晶片則用在終端裝置,也就是邊緣運算的推論,也因此Gogole以Edge TPU稱之。

邊緣運算的推論又是什麼意思呢?

什麼是邊緣運算與推論?根據台灣產業分析公司拓墣的描述:邊緣運算可說是物聯網時代下的產物,「邊緣運算在傳統雲端與裝置端的連接中間,多了一層運算層──Edge 端,Edge 其實指的是靠近數據源的運算單位,包括閘道器、路由器,以及硬體底層相關的各種機器、裝置、設備與系統。」

「有了 Edge 端直接針對多裝置、龐大訊息先做擷取、過濾與處理,對裝置端做出回饋與反應,不用讓所有資料都上到雲端,以期在資料量逐漸龐大、重視資訊即時處理傳輸的現代,更能有效率處理資訊,減少事事上雲端所帶來的時間遞延與資料傳輸/儲存成本。」

而推論呢?NVIDIA的官網文章中指出,「深度神經網路進行『訓練』階段,就猶如校園裡的授課活動。就跟大多數人接受教育的理由一樣,神經網路接受教育的理由也是學習怎麼執行工作。更明確一點來說,經過訓練的神經網路會在數位環境裡發揮所學習到的內容,通過應用程式這種簡單的型態來辨識影像、人類語言、血液疾病,或建議人們下一雙可能會買的鞋子等等。這個速度更快、效率更高的神經網路會按照訓練過的內容,猜想新資料的走向。在人工智慧圈的詞彙裡,這稱為「inference」(推論)。」也因此神經網路模型未經過訓練便不會進行推論。

理解邊緣運算與推論之後,我們回過頭來看Edge TPU。以應用場景來看,Google Cloud首席合作夥伴暨代理商愛卡拉互動媒體共同創辦人暨營運長鄭鎧尹指出:

Edge TPU可以讓整個硬體產業,將雲端的強大運算能力「下載」到本地端的機器上面, 使本地端的機器具備一定的智能。

如一般居家設備或電子設備,能做一定程度的『預測功能』。舉例來說,家中的智慧「門」遇到來客時,並不需要透過網路把人臉丟回「雲端」辨識,而是「門」自己直接就可做完這個辨識。

終端設備無須將資料回傳雲端,就能直接做出預測可以帶來資料安全性更高、延遲速度較小與不受頻寬限制等許多好處,可以提供更好的使用者體驗。以上述的智慧門人臉辨識為例,就可以更快速地提供來客身份確認。

Edge TPU會取代 Cloud TPU?

那EdgeTPU優點這麼多會取代Cloud TPU嗎?也不會。在AI應用場景中,邊緣運算短期內不會取代雲端運算,因為許多高階應用機器學習模型,由於消耗的運算量大,還是需要透過「雲端」訓練機器學習模型,邊緣運算由於硬體成本與環境限制,還是有其運算侷限,也因此若延伸到兩種晶片的關係上,兩者是相輔相成,功能不重疊,是互補關係。

Google在官方部落格中強調:「Edge TPU是設計來讓Google的 Cloud TPU 產品更完整。」如此一來,可以更快地在雲端中訓練機器學習,然後在Edge飛速進行機器學習推演。這讓你的感測器不再只是數據收集器,而是可以做出更在地、即時、智慧的決策。

缺點

不過Edge TPU本質上是ASIC晶片,由於是專用訂製晶片,在AI演算法不斷推陳出新,還沒有到成熟穩定時期,Edge TPU很難克服不同演算法之間的差異性。

關鍵字: #Google
往下滑看下一篇文章
國泰人壽業務平台升級 助攻業務行銷數位力
國泰人壽業務平台升級 助攻業務行銷數位力

國泰人壽持續推動數位轉型,第四屆數位業務發表會近日登場,發表AI創新應用及數位工具升級成果。會中亮點包括升級業務行銷工具「新業務平台 NAP 3.0」(New agent Platform, NAP)導入三大 AI 功能,並率先試辦「全場景人臉辨識計畫」,以提升業務通路服務效率與專業能力;並特地邀請新加坡保險同業MDRT(百萬圓桌會員)業務菁英參加,同台分享跨世代客群溝通與數位轉型實務經驗,泰國人壽更派出策略創新長等高階主管來台參與盛會,期能攜手海外同業彼此交流,為國壽業務部隊經營開創新視野。本次發表會活動吸引逾400位業務人員到場,另有2萬人透過線上直播參與,創下發表會收視人數歷史新高。

國泰人壽自2022年起每年舉辦數位業務發表會,透過新技術、新應用發表,協助業務人員更掌握科技趨勢與善用工具提升工作效率。國泰人壽總經理劉上旗於發表會中表示:「國泰人壽的數位工具不斷進化,NAP從5年前戰情室藍圖規畫,現已成為業務同仁日常工作不可或缺的工具,落實了效率工作與輕鬆生活的承諾,期許進入AI時代,國壽同仁以更堅實的底氣疾風前行。」強調保險服務已邁入智慧新時代,作為台灣保險業數位轉型的先驅,國泰人壽持續投入創新科技,為業務夥伴打造全方位的數位工作環境。

國泰人壽
國泰人壽副董事長李長庚(左3)及總經理劉上旗(右3)率領高階主管,出席數位業務發表會,展現公司對數位轉型的高度重視。
圖/ 國泰人壽

此次發表的「新業務平台NAP 3.0」導入三大AI新功能:一是「文件智慧識別」,透過AI大型語言模型(LLM)輔助智慧字元辨識技術(Intelligent Character Recognition,簡稱ICR),當業務夥伴為客戶進行保單健檢時,不需手動輸入,就能透過ICR拍照將資料正確帶入相關欄位;二是「自動生成圖文」,讓業務夥伴運用AI自製賀卡轉傳給客戶,利用生成式AI技術產生各類情境圖文,讓業務員有源源不絕的話題可以拜訪客戶;三是「AI COACH口袋教練」,能協助業務人員模擬真實銷售情境,透過話術指導與即時修正建議,提升與客戶溝通的精準度與專業服務水準。再搭配「FitBack健康吧」增進與客戶的互動,提供完整且深度的保險資訊,成為業務人員的最強後援。

國泰人壽
國泰人壽NAP「AI COACH口袋教練」協助業務人員模擬真實銷售情境,透過話術指導與即時修正建議,提升與客戶溝通的精準度與專業服務水準。
圖/ 國泰人壽

「新業務平台NAP 3.0」平台使用率已達到100%,深獲業務人員肯定,今(2025)年國泰人壽更率先實現試辦「全場景人臉辨識計畫」,應用於投保、保單變更、保費付款授權、理賠申請及據點臨櫃辦理等五大保險服務流程,業務夥伴可協助客戶使用NAP平台完成人臉註冊,暢行國泰人壽全服務平台,除了讓客戶能享受快速、安全且便利的數位服務,亦能強化業務通路的服務效率,預計年底前將全面推行。

在培育業務人員專業能力方面,國泰人壽優化「C-Learning」內部學習社群平台,以遊戲式的學習模式,提供教育訓練及時事分享,提升學習動能;更透過「集團全攻略」匯聚人壽、產險、金融及健康四大核心服務素材,讓業務人員能夠開拓例如企業主、新手爸媽、超跑車主、銀髮族等不同客戶族群,並透過工具獲得實質的銷售幫助。未來,國泰人壽將持續落實集團「BETTER TOGETHER共創更好」的品牌精神,深化AI技術應用,打造「人機協作」的最佳典範,優化數位服務功能,攜手業務夥伴開創保險服務的新局,為客戶創造更多價值。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
蘋果能再次偉大?
© 2025 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓