真實世界的搜尋引擎?微軟新認知技術要讓一切都可以被識別和「搜索」
真實世界的搜尋引擎?微軟新認知技術要讓一切都可以被識別和「搜索」
2017.05.11 | 微軟

我們對搜尋引擎都很熟悉了,但如果我告訴你,有一個系統可以像搜尋引擎索引數位資訊和內容一樣,對真實世界裡的環境、物體和人進行索引,讓你可以搜尋它們……你相信嗎?

想像這樣一個場景:

你今天在公司的三個會議室開了五個會,到下班時卻突然忘記手機丟在哪間會議室裡了。如果你可以在電腦上打開一個介面,對聊天機器人說:「我的手機在哪裡?」它就能幫你找到,打開那個會議室的攝影鏡頭,看到裡面現在有沒有人。

當然,如果它還可以調取會議室的記錄,讓你查看是否有人曾經動過你的手機,就更棒了。

甚至可以更進一步:

假設你是公司的CEO,你可以提前在公司的辦公系統裡記錄你的手機、平板電腦和筆記本電腦,然後設置一個政策:如果有其他人靠近你的閒置裝置,立刻向你的活躍裝置推送一條通知;如果有人拿起或者開始操作你的裝置,你的所有裝置都會響起警報,公司IT部門也會得到通知⋯⋯

是不是很神奇?

讓真實世界像數位世界一樣,可索引、可搜尋、可查詢、可程式設計和可互動(有點像IFTTT的邏輯),正是微軟正在做的事情。今天在西雅圖舉行的Build 2017開發者大會上,該公司CEO薩提亞·納德拉宣布了一項名為AI for Workspace Safety的新技術,旨在幫助企業客戶更好地對工作環境,特別是那些高安全級別、高危險的工作環境、資產和人員進行管理。

AI for Workplace Safety目前仍處於早期測試階段。它的核心是微軟的認知服務(Cognitive Services),以電腦視覺為主。微軟在Build上展示了一個建築產業的場景:

Build 8
圖/ PingWest

透過調取微軟的認知服務-電腦視覺API,工地現場的攝影鏡頭每秒可以進行2,700萬次掃描,識別環境中的:1、記錄在冊的建築工具;2、記錄未記錄在冊的人員。識別結果將會是可搜索的,微軟的演示者在一個demo聊天軟體裡輸入「鑿岩機(jackhammer)在哪裡?」系統立刻回覆她「在地上」(下圖)。

Build 8
圖/ PingWest

過了一會,系統又發現了操作人員使用完鑿岩機後沒有正確地將機器放到原處,於是發出了報警,告知了具體操作人員:

Build 8
圖/ PingWest

微軟還展示了怎樣透過簡單的對話介面去管理員工權限:一名未授權人員進入了房間,攝影鏡頭透過人臉識別發現了這一情況,立刻記錄了數十張照片,向監工發出報警。查看照片後,監工確認她是今天剛加入團隊的新工人,透過一個對話框,很快就完成了新員工的信息錄入和權限部署:「設定Alice為只可以使用本房間內的工具。」

Build 8
圖/ PingWest

在另一個場景裡,一位叉車司機在操作叉車時不小心推倒了一個液體罐,導致液體洩漏,但因為現場噪音和氣味複雜而沒有發現。系統在掃描畫面時發現了這個異樣,立刻向監工發出警報,問題很快被解決,避免了進一步的污染情況出現。

在西方國家,絕大部分建築工地都會安裝攝影鏡頭。過去,攝影鏡頭的畫面會連接到工地的管理處;現在,很多攝影鏡頭都連網了,讓更先進的建築公司可以遠程管理工地的情況。微軟的這項技術建立在這一基礎上,但實現這些從未見過功能的,其實是微軟的後端人工智慧,結合了電腦視覺和微軟的雲端軟體堆棧 AzureStack。你可以理解為,認知服務就是新的爬蟲,讓現實世界中的物體可以被索引、搜索和互動。

微軟認知服務最早出現在兩年前。當時微軟在自己的伺服器裡部署了一些訓練好的人工智慧API,提供給任何第三方開發者使用。如果你對那個曾經很火的猜年齡應用How-Old.Net有印象,它其實就是微軟為了推廣認知服務,利用其中的人臉識別API開發的一個應用場景。到目前,認知服務已經涵蓋了電腦視覺、語音識別、語音處理、知識結構和搜索5個領域共29個API——如果任何人想開發帶有人工智慧功能的應用、服務,那麼認知服務可以說是最適合被拿來搭建的「積木」,人工智慧界的「樂高」。

去年年底,微軟整合了一些產品部門和團隊以及微軟研究院,成立了新的「人工智慧和微軟研究事業部」,由微軟研究院創始成員,該公司全球執行副總裁沈向洋博士領導。今年一月,在接受PingWest品玩專訪時,沈向洋透露新事業部有一個(很激進的)小目標:3-5年內實現每年貢獻一百億美元收入。從AI for Workplace Safety來看,只用不到半年的時間,微軟已經用現有人工智慧技術找到了賺錢的市場——企業級市場,或者更具體一點,工業。

harry-shum-build-7.jpg
圖/ PingWest

沈向洋在Build 2017上對媒體表示,微軟很注重人工智慧的科技研發,「我是做科技研發出身的,做的很開心,結果被鮑爾默趕出來做產品。」鮑爾默是微軟前CEO。

玩笑之餘,他也表示微軟對於人工智慧技術的商業化也十分看重。他指出新事業部的商業邏輯有兩個:1、思考人工智慧可以和什麼產業結合,甚至顛覆這些產業;2、以微軟的技術,能夠創造哪些新的「10億元級別」生意。 「但我要明確的是,微軟從來不認為人工智慧需要取代人類,我們思考的是怎樣用它去增強人類已有的能力,幫助我們獲得更強的生產力。」沈向洋說。

在今天的Build 2017的主題演講中,微軟CEO納德拉比較隱晦地提出了一件在PingWest品玩看來其實很重要的事:微軟的新口號。

Satya-Nadella-Build-2017
圖/ PingWest

沒錯,聽上去「行動為先、雲端為先」(Mobile first, cloud first) 已經到了退出歷史舞台的時候了,而新的口號將會是「智慧雲端和邊緣運算」(Intelligent Cloud. Intelligent Edge) 。

提出這一新口號的背景,是人工智慧和運算技術的發展,正在將商業推向蒸汽機、信息技術之後的又一次重大模式轉變 (paradigm shift)。對於微軟而言,口號演變的背後是人工智慧科技的應用越來越頻繁,出現在包括Windows、Office 365和Azure等重要產品中,可預見某天會成為所有微軟產品的後端技術。與此同時,人工智慧和科技研發事業部在微軟的重要性正不斷提高,貢獻更多的收入,創造新的商業模式。AI for Workplace Safety就是這一趨勢的一個很好的案例。

「若干年後,很難想像任何技術的背後沒有人工智慧的影子⋯⋯」沈向洋在一篇部落格文章中提到,「人工智慧擁有無窮的潛力,它有能力顛覆任何現有的垂直產業,比如銀行或者零售業,還有任何單一的業務流程,比如銷售、市場或者人力資源和獵頭。」

他認為,儘管電腦視覺和自然語言理解技術都已經比較先進,但電腦目前尚不能對現實世界形成一個可靠和完整的認知。像AI for Workplace Safety 這樣對現實世界進行初步的索引和建模,似乎是一個靠譜的思路——更別提它的商業前景似乎也不錯。

另一件納德拉和沈向洋都提到的事情,是人工智慧的道德問題。

事實上,AI for Workplace Safety在看起來很高科技和高效率的同時,也很容易讓人聯想到它在道德方面的弱點:在你工作的時候,如果總有一個人或者電腦在觀察著你的一舉一動,矯正每一件你沒做好的事情⋯⋯想想是滿恐怖的。這種感覺其實很像最近在北美上映的「科技驚悚電影」《The Circle》的劇情。電影裡,科技公司Circle開發了一種微型攝像機,可以被藏到世界的每個角落,每一個人,甚至包括Circle的員工,都處於公司的監視之下,讓人聯想起喬治·奧威爾的著作《1984》裡的設定。

the-circle
圖/ PingWest

《The Circle》嘗試說清楚的議題,確實有討論的必要:毫無疑問,有一天電腦視覺會被普及到世界的每個角落,當每一台攝影鏡頭每秒都可以掃描和識別2,700萬次,每一支麥克風都能隨時開啟、隨時傾聽,每一個人的每一個舉動都被暴露在一個系統的管理之下,每一條記錄都被保留在某個「黑盒子」裡——數據獲取和個人/公共隱私之間的邊界,到底應該如何劃定?

在主題演講中,納德拉展示了《1984》的封面,並指出:「我們需要為自己創造的技術、自己開發的演算法負責。我確實認為,我們需要自己努力,不讓那些反烏托邦式的情境發生。」沈向洋則透露,由人工智慧和科研事業部牽頭,微軟已經在內部成立了一個人工智慧道德委員會,所有產品和業務部門都會派出自己的代表。該委員會的使命是推出一個指導原則,並監督公司所有部門在權衡道德、設計和發表產品時都遵守這個原則。

不知道這個原則的具體尺度怎麼樣。但我希望未來我在工作的時候,如果在廁所多待了一分鐘,我的老闆不會收到什麼通知⋯⋯

本文授權轉載自:PingWest

關鍵字: #搜尋引擎
往下滑看下一篇文章
為保戶守護重要資產,南山人壽以黃金眼 AI 防詐模型建構全通路資產防護網
為保戶守護重要資產,南山人壽以黃金眼 AI 防詐模型建構全通路資產防護網

為守護保戶資產,南山人壽集結客戶服務、數位、資訊三個部門的能量,自行研發「黃金眼 AI 防詐模型」,自 2024 年底完成開發後,截至今年 11 月已成功阻擋多起詐騙案件、攔阻金額累計逾新臺幣 900 萬元,並獲得 2025 數位金融獎等殊榮。

「黃金眼 AI 防詐」模型為什麼可以有效防詐、更好守護保戶資產?

南山人壽客戶服務資深副總經理李淑娟面帶微笑地解釋:「『黃金眼 AI 防詐』是透過龐大的保戶資料結合前線客服的實務經驗建構而成的模型,不僅克服了壽險業交易頻率低且詐欺樣本極度不平衡的挑戰,還能夠偵測在臨櫃辦理保單借款或解約的高風險個案,讓客服人員可以主動提醒與關懷,有效降低詐騙風險,守護客戶資產安全與信任。」

南山人壽
南山人壽客戶服務資深副總經理李淑娟指出,詐騙手法快速進化,南山人壽研發黃金眼AI防詐模型,用前瞻科技主動攔截風險,強化保戶資產的安全防護。
圖/ 數位時代

從詐保到詐財,壽險業面臨的風險加劇

過往,壽險業者面對的主要風險是保險詐欺,例如,透過偽造事故情節、虛構醫療紀錄等方式詐領保險理賠金,然而,隨著科技迭代與詐欺集團的組織化、專業化,這類手法已快速進化,從「偽造病歷、輕病久住、醫療共犯」等傳統模式,轉向結合數位科技與精準話術的跨領域詐財操作。

這一波詐欺風險不僅滲透力強、具備高迷惑性,也直接影響保戶資產安全。例如,詐欺集團利用假冒理賠諮詢等方式竊取保戶個資,再一步步誘導客戶辦理解約或申請保單借款,最後要求將資金匯到不明帳戶等,壽險業者面臨的風險範圍也從「詐領保險理賠」延伸到「詐騙保戶資產」。

李淑娟資深副總經理進一步指出,南山人壽每年要處理逾 35 萬件解約與借款案件,很難單憑人力在海量案件中精準辨識高風險個案。「為有效防堵詐欺事件,南山人壽除開發 AI 模型辨識詐保事件,更進一步研發黃金眼 AI 防詐模型,用前瞻科技主動攔截風險,強化保戶資產的安全防護。」

南山人壽以黃金眼 AI 防詐模型守護保戶資產

在打造黃金眼 AI 防詐模型時,南山人壽面臨兩個挑戰:首先是壽險的交易頻率低,導致資料稀缺;其次,是詐欺樣本比例高度失衡,導致 AI 很容易誤判。為化解這些挑戰,南山人壽整合保戶行為、保戶與保單側寫資訊與情境因素等多模態資訊進行模型訓練,爾後,透過集成學習(Ensemble Learning)整合多個不同觀點的「專家模型」共同判讀,提升模型判斷準確性。

南山人壽數位專案經理蔡其杭表示:「以多模態數據源跟集成學習的策略打造黃金眼 AI 防詐模型後,我們除了將模型串連至臨櫃客服系統,以直觀的「紅、黃、綠」三色燈號即時呈現保戶的風險等級,協助客服人員快速識別高風險個案,主動介入並阻斷詐騙,更透過『自適應演進』與『外部資源擴充』兩個機制,持續優化模型辨識精準度。」

南山人壽
南山人壽打造黃金眼AI防詐模型,將模型串連至臨櫃客服系統,以直觀的紅、黃、綠三色燈號,即時呈現保戶的風險等級、協助客服人員快速識別高風險個案。
圖/ 數位時代

「自適應演進」指的是,客服人員會依據模型亮起的燈號,結合系統提供的關懷提問表,向臨櫃辦理解約或借款的保戶進行關懷詢問,如資金用途、是否接獲可疑來電等,藉此釐清是否存在異常情況,並將相關結果回貼標籤,作為後續調校模型的關鍵訓練素材,讓黃金眼 AI 防詐模型越用越精準。

「外部資源擴充」則是透過更多元的外部數據強化模型的防詐能力。例如南山人壽與內政部警政署刑事警察局簽署反詐騙合作備忘錄(MOU),在合規架構下共享情資,協助核對保戶是否曾有詐欺通報紀錄。蔡其杭補充,南山人壽目前正與電信業者合作,將其超過 1,400 項特徵因子導入模型,有效提升模型燈號判斷的靈敏度與可靠度,使黃金眼 AI 防詐成為更全面的金融詐欺偵測引擎。

蔡其杭表示,詐騙的手法日新月異,AI 阻詐模型除了能準確識別可疑的高風險案例外,更重要的是具備與時俱進、持續調優模型能力和效果的機制;如同維持客戶服務的品質一樣,刻不容緩。

南山人壽
南山人壽數位專案經理蔡其杭表示,黃金眼AI防詐模型串連至臨櫃客服系統,以直觀的「紅、黃、綠」三色燈號即時呈現保戶的風險等級。
圖/ 數位時代

李淑娟表示:「隨著模型的持續優化,黃金眼 AI 防詐模型的應用範疇將從目前的『臨櫃防堵』延伸到『全通路、跨產業、事前預警』的防禦機制,以事前預警的方式防堵詐欺事件。」舉例來說,當保戶撥打電話詢問保單借款或解約時,系統就會開始運作、提前識別風險,針對透過手機 APP 或網路平台辦理業務的數位客群,系統也會即時偵測,當出現高風險行為時即會立即展開關懷提問。

不僅從科技著手,南山人壽以 SAFE 逐步提升防詐安全網

值得特別注意的是,南山人壽並未將防詐視為單一的科技工程,而是從 SAFE–Skilled(防詐訓練)、Awareness(全民防詐)、Fintech(科技運用)、Engagement(聯防合作)–四個構面打造更完整的防護機制。

在專業技能方面,南山人壽不僅協助相關人員熟悉黃金眼 AI 防詐模型的操作模式,也持續透過內部教育訓練,以及跟刑事警察局等單位合作舉辦的工作坊等方式,全面提升員工識詐、阻詐的能力,達到 AI 人機互動的阻詐聯防保護網。

在防詐意識宣導方面,南山人壽除於全台 18 個分公司櫃檯播放刑事警察局提供的反詐騙影片,並在櫃檯明顯位置放置防詐文宣,協助來訪保戶掌握最新詐騙趨勢;更主動走入偏鄉、校園與新住民社群,並針對聽語障人士製作友善素材,以多元形式推廣防詐知識,降低詐騙事件發生的可能性。

在公私協力方面,李淑娟表示,南山人壽積極培育、鼓勵每一位壽險業務員成為「防詐大使」,在拜訪客戶時主動觀察各種異常徵兆,例如可疑的投資文宣或陌生人的頻繁出入,並將這些現場蒐集到的「軟性數據」提供回公司,作為模型判斷的補強資訊,以提升事前預警效果。

為了更好的保護高齡與失智等高風險族群,南山人壽也積極推動「保單安心聯絡人」機制,鼓勵保戶指定第二聯絡人,在其申請保單借款或終止契約時,可以主動通知聯絡人介入確認,降低詐騙風險;此外,亦針對受詐保戶提供「喘息關懷服務」,以低利紓困貸款協助保戶在遭遇詐騙後仍能穩定度過財務壓力,將防詐保護從事中攔阻延伸到事前預警與事後援助兩個層面,樹立產業新標竿。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
進擊的機器人
© 2025 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓