用AI聽你想聽的聲音,Google能在吵雜影片中偵測特定人聲
用AI聽你想聽的聲音,Google能在吵雜影片中偵測特定人聲
2018.04.16 | Google

人類有一項特殊的能力,能夠在眾多吵雜的聲音中,辨識出我們熟悉、想聽的聲音,「過濾」掉其他雜訊,專注在說話的對象上,而機器要做到這樣的程度,在過去一直被認為是一件相對困難的事。

最近Google研究人員,利用深度學習、影像模型打造出一套系統,能夠辨識出畫面中說話人物的聲音,依照需求強化特定人士的聲音,消除其他人聲、環境音,這項功能將來可以應用在多人的電話、視訊會議中,或者在多人爭辯的政論節目中,幫助我們清楚聽見特定人士的觀點。

利用深度學習,分離不同聲音來源

「人們很擅長在吵雜的環境中,將注意力放在特定的人身上,心理上將其他人與背景聲音靜音。」Google軟體工程師Inbar Mosseri 、Oran Lang認為,這是人類一項先天的能力,可以將眾多聲音區分成各種音源,但過去許多研究都認為,這對電腦來說仍是一項重大挑戰。

根據最新一份叫「Looking to Listen at the Cocktail Party」研究,研究人員透過深度學習,同步分析影片中的影像與聲音,能單從說話者的臉部表情,就辨別出是誰在說話,觀眾只要點選畫面中特定人臉,就能聽見想聽的聲音來源。研究人員使用10萬支、總長度達2,000小時的單一講者影片,訓練系統辨識個別聲音,接著混入其他影片增加背景雜音,一步一步教懂AI辨別不同音軌,最後會產生一套模型。

完成訓練後,這套系統只要偵測到任何影片中有嘴巴在動,系統會去抓取該來源的音檔,並將其他雜音去除。而這套系統之所以厲害,是因為不僅可以去除環境中的雜音,更可以在多人大聲、激烈交雜談話的同時,還能將目標的聲音細緻地分析出來,即便過程中說話的人麥克風不小心遮住嘴型,這套系統依然可以不受干擾的執行。

聽清楚想聽的意見,政論節目將能改善閱聽品質

Google表示,目前仍在探索一切應用的可能,「我們相信這項軟體可以有許多應用,特別是在有許多人說話的吵雜環境,例如增強影片聲音辨識、視訊會議、改良助聽器。」

若這項軟體真的普及,將能改善許多生活中痛苦的經驗,Google可以將這套軟體導入自家Hangouts、Duo這類語音視訊軟體,多人會議時就能過濾背景雜音,增加理解效率,甚至也能改善傳統助聽器無法分離聲音的缺點,未來自動翻譯軟體也能因此受惠。

Google官方釋出了一段影片,畫面中兩位主播激烈的針對議題爭論,聲音重疊時幾乎難以聽清楚任何一方的意見,透過軟體強化左邊主播聲音後,就能清楚聽見單方意見。台灣今年是選舉年,各種議題的辯論將會大量出現,不論是電視政論節目、廣播、網路直播、Podcast,往後若能應用這套軟體,想必能幫助更多閱聽人舒服、有效率的,吸收各種不同的討論內容。

資料來源:EngadgetDigitaltrendsGoogle

關鍵字: #機器學習
往下滑看下一篇文章
全員共識X快速調整,台灣品牌創見攜手亞馬遜全球開店布局全球市場,掌握跨境電商新商機
全員共識X快速調整,台灣品牌創見攜手亞馬遜全球開店布局全球市場,掌握跨境電商新商機

1989年創立的創見資訊(Transcend),成立近40年來,始終以穩健的研發實力與對市場脈動的敏銳掌握,積極應對高速變動的科技浪潮。如今,不僅成為記憶體與儲存裝置的代名詞,還是將台灣技術力推向全球的代表品牌,從歐美、亞洲到新興市場,都能看到創見的產品,廣泛應用在消費電子、工業設備與企業解決方案中。

為了進一步將影響力擴及更多市場,2024年第四季起,創見再將自家產品上架亞馬遜網站。如今,僅僅投入半年,創見便取得優異表現,今年第一季和去年同期相較,營收足足成長150%。

創見資訊業務副總經理陳柏壽解釋,創見的銷售模式,分為B2B和B2C兩種。以B2B來說,過往是透過地區代理商,負責不同市場的推廣、銷售、售後與通路管理,但隨著電商發展日益蓬勃,愈來愈多消費者選擇直接在網路上購物。眼見電商的潛力,創見決定在經營台灣本地的PChome、MOMO等電商通路之餘,再快速組建團隊,投入跨境電商,並首選在全球擁有超過400個營運中心、數億活躍用戶,能協助台灣賣家將產品銷往世界200多個國家和地區的亞馬遜。目前,創見的行動固態硬碟、攜帶式攝影機等多元產品,已在美國、加拿大、墨西哥等北美市場,迅速占有一席之地。

從通路走向消費者,創見從亞馬遜銷售數據中挖掘產品新機會

「對我們而言,加入亞馬遜立即感受到的好處,不僅是業績成長,而是可以直接接觸消費者。」陳柏壽強調,從代理商獲得的消費者資訊較片段,團隊是到直接展開跨境電商的營運後,才陸續接觸到第一線消費者的心聲。

像是團隊就發現,創見20多年前的舊款產品「2G記憶卡」,在亞馬遜上意外受到消費者青睞,「這種以往我們認為可能不太有人願意再買、很老的產品,沒想到還是有人在找,代表亞馬遜的長尾效應非常廣泛。」陳柏壽指出,亞馬遜吸引了來自全世界的消費者,大家都認為,任何在自己市場找不到的產品,只要上亞馬遜網站就一定能買到,「所以我們在亞馬遜上獲得的流量、觀察到的消費者行為,都是非常有價值的商業洞察。」

亞馬遜物流FBA與AI工具雙引擎,創見用跨境電商加速全球化布局

那麼,讓創見快速取得業績成長的秘訣是什麼?

陳柏壽分享,創見加入亞馬遜後,首先使用的工具,便是「商機探測器」,「這絕對是所有要進軍亞馬遜的賣家,第一個要用的工具。」商機探測器除了能協助賣家洞悉市場,理解競爭對手是誰、主力銷售產品有哪些,還能一口氣掌握產品關鍵字、價格帶和銷量資訊。賣家就能依據數據進行產品種類和價格、廣告投放的策略安排。創見近來正在開發的一款新品,就是將「商機探測器」做為市場調查的來源之一,成為研發功能時的重要利器。

其次,隨著生成式AI風潮興起,亞馬遜也推出「A+頁面Gen AI」「AI圖片生成工具(Image Generator)」等相關工具。創見剛加入亞馬遜時,因為產品多又希望能儘速上架,團隊便運用AI+內容產出圖片,「攝影師來不及拍照時,亞馬遜提供了一些省時又省力的生成式AI工具。」

另外,儘管創見在美國有分公司,但亞馬遜的物流FBA(Fulfillment by Amazon),也是賣家必備的工具之一。賣家只要將產品放在亞馬遜的倉庫,FBA便會協助送至消費者手中,要是產品有問題,FBA也會負責收回,「這對所有想做品牌,或是在目的地市場沒有分公司、團隊的賣家,是很方便的工具。」

陳柏壽提到「將產品上架亞馬遜,所有人都可以參與,而要是能善用他們提供的各種工具,就會成為贏家。」

創見資訊積極部署外貿、市場行銷多元人才,打造亞馬遜電商團隊,開啟全球布局。圖為創見於亞馬遜網站上設立
創見資訊積極部署外貿、市場行銷多元人才,打造亞馬遜電商團隊,開啟全球布局。圖為創見於亞馬遜網站上設立的品牌旗艦店。
圖/ Amazon

從亂撒廣告到精準打擊:品牌靠亞馬遜全球開店企業海外陪跑計畫跑出北美市場新解法

但亞馬遜全球開店並非讓賣家自行摸索,官網上設有學習中心,內含眾多免費官方培訓課程,同時也投入教學資源,推出台灣獨有的「企業海外陪跑計畫」,由學長姐賣家領跑、專業導師陪跑,再搭配電商工具與服務商的協助。陳柏壽笑稱,起初團隊在平台上亂撒廣告,是陪跑導師手把手指導、陪著檢視成效,大夥才逐漸抓到投放廣告的關鍵。

如今,創見在善用亞馬遜的工具後,確實愈來愈了解北美的市場趨勢與消費者需求。

原先,團隊以為自家的1TB、2TB等大容量行動固態硬碟,較具銷售潛力,沒想到256GB的迷你行動固態硬碟反而更受歡迎,「大容量產品是美系品牌的重兵部署地,投入許多資源,我們不容易找到破口,但相對之下,小容量產品就成了突破點。」

創見也持續透過亞馬遜,建立鮮明的品牌形象、完善產品線,像是密錄器便斬獲不錯表現。這類產品過往都透過代理商,以專案模式在線下銷售,但對精打細算的消費者來說,密錄器在線下的價格較高昂,從網路購買成了另一個好選擇,「這類產品之前在亞洲賣得比較好,但在亞馬遜上銷售,讓更多人認識『創見』,也為我們開了一扇窗,有助於未來取得更多跨界生意。」藉由檢視消費者在亞馬遜上留下的評論,團隊更回頭調整介紹產品的方式,從文字直接改為影片,以更貼近市場需求。

接下來,創見將持續鎖定人口基數大、GDP高、匯率穩定的市場,透過跨境電商發展全球業務;歐洲、澳洲、新加坡、中東等可以將產品再往外銷售的新興站點,也是瞄準的重點。

創見資訊業務副總經理陳柏壽表示,一開始只有自己一個人,要看完龐大的資料,從無到有組建新團隊,但因為內
創見資訊業務副總經理陳柏壽表示,一開始只有自己一個人,要看完龐大的資料,從無到有組建新團隊,但因為內部已經有共識,再搭配亞馬遜全球開店企業海外陪跑計畫,從決定要做到全速啟動,很快地就開啟跨境電商之路。
圖/ 數位時代

行動力與執行力!創見用對思維、人才與工具,快速打開全球通路

面對現今快速變化的市場,陳柏壽建議,投入跨境電商首重「改變思維」,必須理解箇中操作模式,與過往的傳統外銷完全不同;其次,還要找到具相關經驗的團隊。

亞馬遜全球開店也分享觀察,創見能在短時間內取得亮眼成果,關鍵在於主管的全力支持、團隊快速到位,以及敏捷的學習與調整速度,「創見確定要投入跨境電商後,做的就是長遠通路規劃。一方面迅速找到外貿、市場行銷等多元人才,同時清楚知道目標,再搭配亞馬遜全球開店企業海外陪跑計畫,成果很快就出來了。」

陳柏壽進一步強調,當思維、團隊都到位後,決勝關鍵就在工具的使用。亞馬遜上有眾多工具,還能直接探知消費者需求,賣家可以從中找到自己與競業產品的差異性,並就此往下發展、設定策略,「機會永遠是留給準備好的人。只要你的產品具備足夠競爭力,亞馬遜全球開店就是協助你把握機會、賺到更多生意的最佳夥伴。」

5 月 21-22 日 | 台北文創 14 樓
區域到全球:亞馬遜創新戰略發佈會
限量席次 立即報名

從區域到全球:亞馬遜創新戰略發佈會
圖/ AWS

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
AI全球100+台灣50
© 2025 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓