Meta翻譯技術計畫拓展到客語!工程師揭秘:AI用「鄉土劇」學台語
Meta翻譯技術計畫拓展到客語!工程師揭秘:AI用「鄉土劇」學台語

針對Meta日前提出全球首款以語音對語音翻譯,讓閩南語能直接翻譯成英語的技術,參與此專案開發的台灣工程師陳鵬仁透過線上形式分享更多此項技術背後故事。

台灣工程師陳鵬仁
台灣工程師陳鵬仁。他指出,因為開發團隊有很多人熟稔閩南語,因此選擇以此作為第一個開發翻譯語言
圖/ Mashdigi

陳鵬仁說明,最初在此專案選擇以閩南語作為第一個開發翻譯語言的原因,其實在於開發團隊有不少熟稔閩南語的同仁,因此可以在更快時間驗證翻譯結果是否正確、通順。

UST技術實際運作架構
UST技術實際運作架構
圖/ Mashdigi

而為了打造能直接以語音對語音的翻譯技術,多達50人規模的開發團隊除了工程師,還包含語言學者與社會學家,以及倫理學家與諸多跨學術團隊成員,藉此研究目標翻譯語言背後結構與文化影響,例如美國所使用的英語與英國地區的英語雖然互通,卻有不少用字遣詞,或是發音上的差異。

而閩南語其實也有類似情況,光是在台灣、中國福建沿海地區,以及馬來西亞、新加坡等地所使用的閩南語就有不少差異,甚至閩南語還有七聲八調的不同,而在台灣也有明顯的南腔北調情形。

此外,閩南語實際上沒有標準化的文字系統,加上各地區發音用詞上的差異,更讓這個原本是以口語相傳為主的語言,更難以制式翻譯方式轉換成其他語言。陳鵬仁表示,實際上也是開始投入開發之後,才發現要順利將閩南語翻譯成其他語言,真的比想像中還難。

與台灣學術單位合作語庫,因此翻譯結果會有台灣腔

先前說明中,Meta是透過閩南語的念音轉換成數位資料,並且將這些資料進行分類、標示,並且透過機器學習訓練,讓其他語言可以對應合適翻譯結果。若其中有無法直接翻譯,或是難以呈現精準意思的情況,系統就會透過其他相近語言進行翻譯,並且將翻譯結果轉換成目標語言。

延伸閱讀:Meta靠AI讓台語翻成英文,背後推手來自台灣!盼能與父母溝通無礙

此項專案也與台灣相關機構合作,其中包含使用Taiwanese Across Taiwan建立長達300小時長度的台文語音語料庫,藉此建立第一個閩南語與英語雙向語音翻譯基準資料集,由於參考語庫含大量閩南語念音資料與可供對照的中文字幕內容,因此可以利用機器學習方式建立閩南語念音與中文之間的翻譯結果,並且可再利用中文翻譯結果轉換成英語,實現將閩南語翻譯成英語。

台灣工程師陳鵬仁
台灣工程師陳鵬仁。
圖/ Mashdigi

至於目前參考資料多半來自台灣學術單位,以及多個台灣閩南語連續劇內容,因此目前訓練模型所對應使用閩南語,會更像是台灣地區使用的閩南語,就連翻譯後的念音也更像是台灣腔。陳鵬仁解釋,這主要還是取決訓練時所採用參考語庫內容,由於目前用於學習的語庫多半來自台灣,因此訓練成的語言模型自然就會有台灣腔。

目標讓更多人可以跨語言溝通

如同先前說明,Meta打造此翻譯系統,主要希望打破不同地區的語言隔閡,並且讓使用者能直接透過對話方式溝通,而非只是透過文字上的轉譯,甚至可以透過語音、聲調等方式更自然表達真實情感,而未來應用不只是面對面的交談,更包含Meta目前著重發展的元宇宙互動,讓位於各地的人都能流暢地聊天互動。

不過,目前此項技術仍受限演算法、學習資料內容等限制,因此目前僅能做到逐句翻譯,暫時還無法對應流暢的對話表現,但陳鵬仁預期在日後累積更多可用於訓練的語庫資料,加上運算技術持續進步,將能實現更即時的語音互譯效果。

讓閩南語可順利翻譯為英語,陳鵬仁表示目前已經完成第一個里程碑,接下來則會計畫翻譯結果更加精準,之後才會逐步提升翻譯速度,並且讓此專案納入更多語言,例如台灣也有不少人使用的客家話,或是其他國家地區僅有口語相傳的語言也能透過此項技術建立學習模型,進而達成能與更多語言互譯目的,甚至也能藉此讓更多面臨瀕危的少數語言得以保留。

台灣工程師陳鵬仁
陳鵬仁說明,目前在美國生活中,會透過台灣台語繪本讓年幼女兒學習台語
圖/ Mashdigi

本文授權轉載自:Mashdigi

責任編輯:傅珮晴

往下滑看下一篇文章
從「存資料」到「用知識」:網創資訊攜手浪LIVE,讓 AI 成為最懂企業的內容幫手
從「存資料」到「用知識」:網創資訊攜手浪LIVE,讓 AI 成為最懂企業的內容幫手

對已經成熟發展的企業來說,最大的挑戰不是如何創新,而是經驗無法有效傳承,而生成式 AI 的價值正在於此,它讓分散的知識從「共同保存」走向「即時運用」,使組織得以在既有經驗之上,持續累積能力並向上成長。

由旭瑞文化傳媒成立、全台最大直播平台浪LIVE,正是這種轉變的最佳寫照。「我們其實一直都有在整理內部的知識、技術文件和作業流程規範,但做法比較像是集中在倉庫裡,雖然找得到,卻不一定用得快。」旭瑞文化傳媒技術研發中心技術總監黎欣捷(James)形容。

網創X浪Live-2.jpg
浪LIVE 攜手網創資訊導入 AI 知識管理系統 NAVI,打造出一顆可以分析與調用歷史資料並產製新內容的「企業智慧大腦」
圖/ 數位時代

為此,浪LIVE 攜手網創資訊導入 AI 知識管理系統 NAVI,打造出一顆可以分析與調用歷史資料並產製新內容的「企業智慧大腦」,讓經驗不再只是被保存,而能實際參與日常營運流程。網創資訊總經理吳炳鈞進一步說明,這是因為 NAVI 將浪LIVE既有資料整理成可被運用的知識基礎,並在此基礎上生成內容,故能真正融入浪LIVE使用場景,提升文章產製與活動規劃的效率。

用 AI 提速,回應高頻、快節奏的營運需求

作為直播產業的領導平台,浪LIVE 不僅市占率超過 50%,每月活躍用戶數更高達 40-50 萬人。能夠寫下高黏著度、高互動率的成績,除了堅持以才藝直播為主軸、在市場上做出差異化特色,快速更新的內容與密集的行銷活動,同樣是浪LIVE 維繫用戶黏著度的關鍵。

網創X浪Live-3-2.png
旭瑞文化傳媒技術研發中心技術總監黎欣捷表示,透過NAVI能夠有效提升文章產出與活動企劃的效率。
圖/ 數位時代

黎欣捷表示,浪LIVE 每日都會更新社群貼文與文章內容、每個月平均規劃約 20 至 25 檔活動,不僅內容產出量龐大,對速度的要求也極高。編輯團隊在完成採訪後,必須在最短時間內產出文章,且要符合品牌的風格和版型,而營運團隊不僅要不斷發想新的玩法,還得預先估算不同設計下的投資報酬率、參與人數等機率,以確保活動能兼顧創意與成效。

這種高頻的營運節奏不僅極具挑戰性,還容易使團隊感到疲憊。因此,浪LIVE 開始思考如何利用 AI 來提升文章產出與活動企劃的效率,而 NAVI 正是思考後的最佳解答。

應用場景1:文章產製,不再從零開始

吳炳鈞進一步說明,網創資訊如何協助浪LIVE 將 NAVI 應用於文章產製與活動企劃。

先就文章產製來看,網創資訊將浪LIVE 過往累積的大量文章匯入 NAVI,由系統學習品牌文章的語氣與編排方式,及不同編輯的寫作風格並加以分類。之後,編輯只要提供採訪逐字稿或相關素材,並指定想要的文章風格,NAVI 便可依此生成初稿,再由編輯進行調整與潤飾,大幅加快整體產出速度,也讓編輯可以將更多心力投入內容品質的把關與主題發掘,用快速更新而主題有趣的文章,吸引會員持續留在平台。

網創X浪Live-4.jpg
網創資訊總經理吳炳鈞進一步說明, NAVI 將浪LIVE既有資料整理成可被運用的知識基礎,並在此基礎上生成內容,才能真正融入浪LIVE使用場景。
圖/ 數位時代

吳炳鈞強調,NAVI 不是憑空寫文章,而是根據企業過去累積的內容與規範來生成,這樣的產出結果,才會更貼近原本的品牌風格與實際需求。更重要的是,網創資訊還能根據客戶使用情境進行客製化調整。例如,NAVI 可以整合圖片和文字,生成一篇圖文並茂的文章,並同步輸出對應的 HTML 程式碼,浪LIVE 編輯只需貼至後台系統,就能完成上稿作業,不必再花費大量時間去調整版面配置。

網創X浪Live-5.jpg
網創資訊業務經理Hailey Ouyang表示,NAVI 在產出文章的同時,可以同步輸出對應的 HTML 程式碼,減輕浪LIVE 編輯的上稿作業負擔。
圖/ 數位時代

應用場景2:活動規劃,從歷史經驗找出新玩法

再就活動規劃來看,網創資訊同樣先將浪LIVE 的歷史活動範本、禮物清單與獎勵機制導入 NAVI,由系統學習營運團隊在發想活動時的思維脈絡,之後,團隊成員只要輸入關鍵字,NAVI 就能建議相應的活動方式與獎勵組合,作為活動規劃時的參考。

黎欣捷認為,NAVI 就像一位資深顧問,不僅提供更多元的視角與玩法建議,縮短活動規劃所需的時間和心力,也能即時調閱過往經驗,協助團隊跳脫個人思考盲點,避免重複規劃過去已經做過的活動內容。

吳炳鈞進一步以禮物清單為例,說明 NAVI 帶來的效益。浪LIVE每一檔活動都需要重新設計禮物或做不同的組合搭配,因此資料庫已累積上百種不同類型的禮物,這使得團隊成員在規劃活動時,常常要花很多時間去發想新禮物或搜尋資料。而在導入NAVI後,系統可以根據歷史資料提供合適的禮物搭配建議,協助團隊在規劃新活動時,更有效率地運用既有資源。

網創X浪Live-6.jpg
NAVI可以根據歷史資料提供合適的禮物搭配建議,協助浪LIVE團隊在規劃新活動時,更有效率地運用既有資源。
圖/ 網創資訊

不只生成內容:NAVI 三大特色,讓 AI 真正嵌入企業流程

在資料管理與內容生成外,網創資訊也從企業管理需求出發,規劃出以下 3 大系統特色,使 NAVI 得以真正融入企業的營運流程中。

第一,NAVI 支援至少 20種大型語言模型,能因應不同使用需求,處理文字、圖片、音訊和影片等多種形式的內容。第二,系統可部署於私有雲或地端環境,讓資料能留在企業內部,降低被外部 AI 模型使用的疑慮。第三,整合 AD 身份驗證與授權機制,可依部門和角色別去設定資料存取權限,確保 AI 在回應問題或產生內容時,只會引用該使用者可存取的資料範圍,避免誤用或資料外洩的風險。吳炳鈞補充,由於系統可進行部門切割,也能進一步統計各單位的使用量,方便企業進行內部成本分攤與管理。

「企業需要的是能嵌入流程的 AI,而不是只會回答問題的工具。」吳炳鈞指出,因此 NAVI 一開始就定位在企業知識管理系統,從而發展上述系統設計。近年來,因應 AI Agent 趨勢,網創資訊亦將相關概念融入 NAVI,使系統具備更高的主動性,能依任務需求串接不同資料庫與內部系統,協助使用者完成特定工作流程。

網創X浪Live-7.jpg
網創資訊PM Keith Hsu指出,NAVI 融入 AI Agent 概念後,具備更高的主動性,能依任務需求串接不同資料庫與內部系統,協助使用者完成特定工作流程。
圖/ 數位時代

未來,網創資訊將持續與浪LIVE 深化合作,逐步導入更多內容至系統中、拓展更多應用場景。也期待在與客戶合作的過程中,共同發掘更多具體的應用靈感,並視需求開發對應功能,持續放大知識與經驗的價值,讓技術不只停留在工具層次,而能真正轉化為企業成長的動能。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
2026 大重啟
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓