微軟推出「Seeing AI」app,將手機鏡頭變成盲人的眼睛
微軟推出「Seeing AI」app,將手機鏡頭變成盲人的眼睛
2017.07.13 | 微軟

微軟推出「Seeing AI」手機app,利用電腦視覺技術,為視障者描述周遭環境。只要將鏡頭指向一個人,手機就會說出對方是什麼樣的人、心情如何;對著一個產品掃描,就會描述是什麼產品。

去年3月,微軟在開發者大會上展示了「Seeing AI」的原型。「Seeing AI」是利用神經網路技術識別周遭環境,神經網路也廣泛用於自駕車、無人機等。現在「Seeing AI」已可在美國免費下載,但目前僅釋出iOS版,尚未向Android或其他國家用戶推出。

microsoft_seeing_ai_RWcIkC.jpeg
微軟的新app「Seeing AI」可利用電腦視覺技術,為視障者描述周遭環境。

「Seeing AI」可適用於許多情境。除了能辨識先前看過的人、猜測陌生人的年齡與心情,也可透過掃描條碼辨識家庭用品。此外,「Seeing AI」還能閱讀標誌、菜單或掃描文件。這項功能不只是單純的光學字符辨識技術(OCR),還會提示使用者將鏡頭左右移動,以將目標放入畫面中。

這款應用程式還有一項實用功能,就是能辨別美元。由於不同面額的美鈔,大小、顏色都相同,對視障者往往是個困擾。透過「Seeing AI」就能協助他們獲取這些資訊。

<iframe width="640" height="360" src="https://www.youtube.com/embed/bqeQByqf_f8" frameborder="0" allowfullscreen></iframe>

「Seeing AI」的基本功能大多是直接在設備上進行,因此存取速度快,即使沒有網路連線時也能使用。不過有幾項實驗功能,例如描述整個場景或識別手寫,就需要連接到雲端。

技術負責人Saqib Shaikh表示,這款應用程式與其他類似產品的區別是,「Seeing AI」的神經網路處理速度極快,號稱在幾毫秒之內就能在設備上完成臉部辨識。

微軟成立通用AI實驗室、與MIT合作、建立AI倫理監督小組

微軟在人工智慧技術上不斷推進。微軟剛宣布成立一個專門研發通用人工智慧的實驗室「Microsoft Reseach AI」,設於美國華盛頓州雷德蒙德的微軟總部。團隊將有超過一百名研究員,領域涵蓋自然語言處理、機器學習與感知系統等。

新的研究單位除了微軟公司現有的AI專家之外,還會增募新人,包括認知心理學等相關領域專家。此外,新實驗室也將與麻省理工學院的腦、心智與機器研究中心(Center for Brains, Minds and Machines)正式合作。

除了成立新實驗室之外,微軟將會建立「人工智慧倫理監督小組」,該小組能為整個公司提供相關諮詢,這也是目前業界的趨勢。先前,微軟與DeepMind、Amazon、Google、Facebook和IBM,針對人工智慧開發倫理共同簽署跨公司合作關係。此外,Google、DeepMind內部也都有各自的AI倫理委員會。

資料來源:The Verge微軟Seeing AITechCrunch彭博社

關鍵字: #app #人工智慧
往下滑看下一篇文章
核保、理賠、客服全面AI化:富邦人壽導入「三大智能助理」升級保險服務鏈
核保、理賠、客服全面AI化:富邦人壽導入「三大智能助理」升級保險服務鏈

近年談 AI 轉型的金融業者不少,多半從技術切入,闡述架構藍圖與導入策略。富邦人壽則選擇從行政端著手,先問哪個場景最攸關保戶,再決定 AI 該往哪裡導入。「關鍵在於回歸以人為本的核心,專注於客戶體驗。」保單行政處處主管蔡佳蓉副總經理指出,核保、理賠與客服,是服務價值鏈中與保戶互動最直接的三大關鍵,自然成為富邦人壽 AI 布局的起點。

以 AI 賦能核保,審查時間省六成

開始一張保單的旅程,核保是第一步,攸關保戶是否能儘速取得保障。投保過程中,若涉及既有病史或體況,核保便須介入評估,綜合審視商品條款、投保規則與法律規範,以決定是否承保,可說是一項高度專業的決策工程。

「以一份新契約為例,客戶的病歷資料可能厚達百頁。核保員得逐頁翻找診斷紀錄、用藥史與手術紀錄,判斷其對承保的影響。但大多數核保人員並不具備醫護背景,這方面的專業判斷力全靠長期經驗積累,導致傳統作業十分耗時。」蔡佳蓉解釋。

為此,富邦人壽建構「核保智能助理」,運用生成式 AI 摘要病歷,解決過往判讀大量專業英文病歷的痛點。這可不是把資料丟進 AI 資料庫就好——蔡佳蓉分享,導入過程中的挑戰之一,是為特種個資去識別化,需先透過個資遮罩工具處理病歷;此外,針對 AI 常見的「幻覺」風險,團隊也反覆調校提示詞,讓摘要報告力求精準正確。

她強調, AI 定位為「初篩與重點整理」的助手,最終決策權仍歸於核保員。透過 AI 摘要、核保員決策的人機協作模式,體況審查平均作業時間成功從 40 分鐘縮短至 15 分鐘,核保效率提升六成,讓核保同仁能將心力集中於高風險案件與例外處理。

以 AI 輔助判讀,加速理賠條款今昔對照

同樣面對大量資料判讀挑戰的,還有理賠。理賠是保險公司實踐承諾、展現服務價值的重要時刻,但隨著醫療技術不斷進步,許多保單條款當年訂定的手術項目,到了今天可能已發展出全新的治療方式。理賠人員需要從大量醫療資料中,判斷新技術是否符合條款約定,過程相當耗時,也需要高度的醫療專業知識。

對此,富邦人壽導入「理賠智能助理」,整合醫療資訊與內部顧問醫師的專業意見,協助理賠人員快速比對保單條款與客戶所接受治療的對應關係。例如,當醫療科技演進產生新的手術方式時,AI 可協助理賠人員快速了解該疾病與手術的進行方式,並檢索相關條款與內部規則,提供理賠判斷建議,縮短過去需逐一查找資料的時間。此外,系統亦能協助摘錄擷取診斷書、病理報告及醫療費用單據等理賠文件審核重點,大幅縮短人工判讀比對時間,讓理賠人員更專注於專業判斷與保戶溝通,加速理賠服務效率與一致性。

客戶服務處處主管張婉茹指出:「AI 除了加速理賠作業,也能將資深理賠人員的專業經驗與判斷邏輯濃縮為高效吸收的知識庫,協助新進同仁快速掌握案件重點與判斷依據,縮短學習曲線,並提升理賠判斷的一致性與品質。」透過 AI 助理減輕資料整理的負擔,理賠人員得以將精力回歸專業決策與客戶溝通。

以 AI 客服加速分流,前線服務更到位

在核保與理賠之外,最大量的服務場景是客服。張婉茹表示,隨著數位原生世代逐漸成為保戶主力,客戶傾向先自主操作解決問題,不會直接撥打電話;一旦選擇撥打電話,就代表問題已超出自助服務能處理的範圍。

對此,AI 客服的導入,不只是回答問題,更是協助客戶找到最適合服務管道的「智慧導航員」。「我們是第一線面對客戶,因此 AI 客服最重要的不是回答得多,而是回答得正確。」張婉茹表示,富邦人壽在設計上特別重視回答來源的可信度,透過既有知識庫與 FAQ 資料治理機制,讓 AI 優先扮演「理解需求、引導服務」的角色,確保保戶獲得正確且一致的資訊。

事實上,富邦人壽的文字客服早於大型語言模型盛行前便已上線,目前文字客服平均每月處理超過六萬則訊息,智能助理能即時理解客戶需求,將保單查詢、資料變更等簡易服務導引至 App 或線上平台快速完成;面對理賠、保單變更或保障內容等較複雜的需求,則由真人客服接手提供專業協助。讓簡單問題快速解決、複雜問題由專人服務,將有限的人力資源投入最需要專業與溫度的服務情境,讓分流機制發揮實際成效。

從核保員手中的病歷、理賠人員桌上的單據,到線上客服的迅速回應,富邦人壽的 AI 布局,始終緊貼第一線作業現場。張婉茹表示,科技發展不一定要一次 end to end 全到位,應該是不停小步快跑,慢慢把應用場景擴大。去年底推出的全新富邦人壽 App,將「簡單、貼心、隨行」的理念落實在使用者介面體驗上,就是一次階段性集大成的成果。

但無論 AI 如何加速資料判讀、優化流程,專業判斷與服務溫度仍是機器無法取代的核心。「要有專業,才能判斷 AI 的產出品質。」富邦人壽兩位主管也強調,科技迅速發展下,富邦人壽導入 AI,不是要取代核保員、理賠人員或客服人員,而是希望讓每一位同仁把時間花在最有價值的地方。當AI承接了流程中繁瑣的資料負荷,人員就能更專注在判斷、溝通與服務,讓同仁的專業與心力回歸到最需要判斷力與人情味的溝通之上,這才是真正以客戶為中心的 AI 轉型。也是富邦人壽實現「AI Everywhere」的旅途上不忘的目標。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
台達電全解讀
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓