Meta又開源AI模型,算盤打的是「AI元宇宙」!ImageBind如何帶來多感官體驗?
Meta又開源AI模型,算盤打的是「AI元宇宙」!ImageBind如何帶來多感官體驗?

當各大科技公司在AI人工智慧的戰場上各顯身手,試圖占據AI市場的一席之地時,有個看似沉寂許久的科技巨頭,看似把未來押在虛擬世界「元宇宙」而錯失了先機,卻正在迎頭趕上,不斷推出、甚至開源自家的AI研究成果──那就是Meta。

Meta於5月9日宣布了一個新的開源AI研究項目,名為「ImageBind」,且不只可以生成文字、或是圖片,還可以串聯起文本、聽覺、視覺數據、3D深度資訊、溫度、動作數據。這可能將是虛擬世界「元宇宙」計畫的一大步,也代表未來AI的走向,將會是創造身歷其境的多感官體驗。

雖然這還在研究階段,Meta近期也還稱不上高調,但也不斷公開自家的研究項目,與相較之下越來越神秘的OpenAI和Google形成強烈對比。

延伸閱讀:塗鴉怎麼變動畫?Meta開源「AI繪圖專案」,超簡單5步驟立刻動起來

人工智慧「多模型」型態,將是生成式AI的趨勢?

早先廣為人知的生成式AI如Midjourney、Stable Diffusion和DALL-E,都是在訓練階段時就已經把文字和圖片「連接」在一起的系統,在訓練時,這些模型就會以文字敘述來尋找視覺資料中的模式。目前其他生成聲音或是短片的生成式AI也是如此。

但Meta表示ImageBind模型連結的不只文字和圖片,還包括了溫度(紅外線影像)、3D深度距離、還有用慣性測量裝置(inertial measuring unit,IMU,可在手機或智慧手錶中追蹤螢幕轉向等活動)所取得的動作數據。

這個模型將預期的成果是: 模擬人的感知 ,用有限的數據來生成複雜的場景。如果未來能夠搭配虛擬實境設備使用,ImageBind不僅可以生成感官效果,還可以在使用者所在的站台或座椅環境生成動作或效果。例如:輸入「長途旅行」,ImageBind可能就可以讓你置身於搖晃的甲板,讓你聽到海浪聲,並給你陣陣涼爽的海風。

元宇宙  metaverse
Meta宣布新的開源AI研究項目「ImageBind」,不只可以生成文字、圖片,還可以串聯起聽覺、視覺數據、3D深度資訊、溫度、動作數據。這可能將是虛擬世界「元宇宙」計畫的一大步。
圖/ shutterstock

Meta也在官方部落格指出,未來其他感覺數據也會添加到模型當中,例如觸覺、嗅覺和大腦fMRI信號等。文章中也指出,這個研究讓AI生成模型「更接近人類在許多不同形式的資訊當中,同步、整體且直接的學習。」

不過,這都還只是研究項目,目前都沒有實際的應用成果或消費者心得。不過,繼去年9月Meta低調推出短片生成AI模型後,這個研究項目在未來,也可能會是Meta元宇宙大夢的重要里程碑。

Meta早就是AI老手?大方開源AI研究,能搶先訂下標準?

儘管低調,人工智慧在Meta早就已經是旗下Facebook或Instagram貼文與短影音的幕後關鍵。用戶在Instagram上看到的所有內容中,就約有40%是由AI推薦的,而Instagram和Facebook兩個一起算的話,比率則是20%。在業務方面,Meta的主要業務──銷售廣告,也是AI來操盤的。

Meta在AI領域的最大優勢之一,就是旗下的研究部門,許多專家認為,Meta團隊的競爭力並不輸Google和OpenAI等同行。

延伸閱讀:AI、虛擬世界我全都要!祖克柏加碼提新概念「AI代理人」,那是什麼?

雖然Facebook和Instagram大量使用AI,但Meta的應用程式都不允許人們創建新內容,如文本或影像。外媒《Vox》指出,可能跟Meta長期被控「散播仇恨言論、錯誤訊息」的罵名有關,Meta還不想倉促建立一個會產生更多有害或是不正確內容的工具。

其實,Meta已經嘗試過了,他們去年11月所發布、以學術論文進行訓練的實驗性AI工具「Galactica」吐出了不符合事實的種族主義訊息,在三天內就被撤下了。

Meta
Meta在AI領域的最大優勢之一,就是旗下的研究部門,許多專家認為,Meta團隊的競爭力並不輸Google和OpenAI。
圖/ Canva

Meta同時也面臨硬體設備難以執行人工智慧系統的問題。去年9月,Meta內部發布的一份備忘錄表示,該公司「在AI開發方面,工具、工作流程和製程方面存在重大差距」,並且需要「在這方面進行大量投資」。

不過,Meta的人工智慧研究部門仍定期發布公開的AI研究論文(不包括社群媒體演算法的AI)。其他AI公司,如Google和OpenAI因競爭而不那麼願意公開研究成果。

Meta執行長馬克.祖克柏就曾表示, 公開研究成果可以讓Meta率先制定AI產品開發的行業標準,並讓外部開發者更好地融入Meta的生態系統 。今年2月,Meta的研究部門與研究人員就開放LLaMA的大型語言模型給AI社群索取使用權限。

LLaMA的能力目前落後於OpenAI最新的GPT4模型以及Google的Bard,但開放資源仍然代表著AI研究社區不須強大的電腦,就可以修改底層程式碼。但這也有專家認為,過於自由的開放可能會遭到惡意使用。

延伸閱讀:Meta要改名成「MetAI」?祖克柏過度沉醉AI世界,分析師發出警告

資料來源:The VergeengadgetVox

責任編輯:林美欣

往下滑看下一篇文章
Fubon+ App 上線即吸引數百萬用戶青睞的訣竅:懂你所需、給你所要
Fubon+ App 上線即吸引數百萬用戶青睞的訣竅:懂你所需、給你所要

隨著政策法規開放與消費者行為改變,金融服務不只是交易平台,更是民眾生活的一部分,加速數位金融服務往個人化、智慧化與互動化靠攏,觀察到這股趨勢,台北富邦銀行不僅積極展開轉型旅程,更於 2023 年中啟動 Fubon+ 行動銀行 App 專案:從使用者需求出發,以「簡單」、「直覺」、「懂我」三大設計理念重塑產品架構、系統介面與使用體驗,打造專屬使用者的智慧生活金融。

北富銀以簡單、直覺、懂我為核心訴求,Fubon+化身專屬智慧生活金融助理

集結跨部門 600 位同仁的力量、歷經一年餘的時間,台北富邦銀行在去(2024)年 11 月正式推出 Fubon+ App,在極短時間內協助高達九成的行動銀行用戶轉移,更因應使用者需求快速迭代功能服務,透過數據分析完善個人化體驗,成為使用者不可或缺的智慧生活金融助理。

台北富邦銀行數位金融業務處副總經理傅奕樵解釋:「Fubon+ App 是以使用者需求為核心、以金融使用行為進行服務分類,並以牌卡介面提供信貸、信用卡、帳戶等服務,讓使用者可以更簡單、直覺的點選與連結所需服務,大幅提升操作效率與優化使用體驗。」

富邦金控
Fubon+ App不僅系統介面翻新,功能服務的深度與廣度也隨之擴充
圖/ 數位時代

根據統計,Fubon+ App 上線之初即整合超過 200 個功能服務,每月平均 以5 到 7 個新增或更新功能向上攀升,滿足不同使用場景。例如,針對偏好夜間使用App的族群推出深色主題介面、考量年長者需求提供五種字級選擇,以及因應使用者需求提供夜間換匯服務等。

在這個過程中,平衡多元功能與使用體驗至關緊要,對此,台北富邦銀行數位金融總處副總處長周郭傑認為:「功能越多元,系統介面與操作流程越需要簡潔直觀,為實現這個目標,必須站在使用者立場,思考、設計每一個互動細節與使用體驗。」以生活繳費為例,使用者只要以Fubon+ App繳交水費或電費,系統就會自動記錄並主動發出繳費提醒,降低遺漏與逾期風險,進一步優化金融服務體驗。

Fubon+ App以數據驅動的個人化服務化身使用者的智慧生活金融助理。具體作法有三:整合銀行、人壽與證券數據資料,讓使用者可以單一平台掌握各種資產數據,如銀行存款明細、人壽保單與投資績效等;其次是在App提供「富邦共學」等免費線上課程資訊,以及專屬的理財建議,協助使用者快速掌握所需的理財資訊,以及透過「我的權益」提供使用者專屬優惠與回饋,加速使用者下達各種金融決策。

最後,同時也是最重要的是蒐集與分析使用者的數位軌跡,例如交易數據與互動行為,讓台北富邦銀行可以在對的時間、以對的方式提供專屬使用者的產品服務與資訊,例如在使用者的信用卡額度將滿時發送調額提醒訊息等,即時滿足使用者在不同金融場景的服務需求。

聚焦五大進化服務,Fubon+ App與時俱進滿足使用者需求

為擴大Fubon+ App設計理念與價值,台北富邦銀行將聚焦「安全」、「財富」、「暖心」、「便利」與「智能」五大面向,持續優化金融服務能量。

傅奕樵表示:「資安風險與詐騙事件頻傳,讓使用者對數位金融抱持戒心,為改變這個狀況,Fubon+ App全面提升系統安全、裝置安全與落實資料保護,針對信用卡戶提供卡片安全鎖服務,內連帳戶安全中心提供多重安全設定,包含裝置綁定跟透過OTP(MOTP)進行身分與交易認證等,更透過Fubon+ App圖像化介面讓使用者掌握安全等級,以及知道如何降低風險,進而提升使用者對數位金融服務的信任。」此外,台北富邦銀行將於下半年度導入FIDO金融行動身分識別標準化機制,讓使用者在線上交易時可以生物辨識的方式快速通過身分認證,更好保護用卡安全。

富邦金控
Fubon+ App圖像化介面讓使用者掌握安全等級,提升使用者對數位金融服務的信任。
圖/ 數位時代

除了防詐安全,Fubon+ App更同步進化財富管理功能,以暖心設計與簡單直覺介面,讓使用者可以輕鬆在線完成資訊查詢與金融交易,如匯率到價通知、視覺化市場燈號,到個人化的消費與投資數據分析,為使用者打造一站式的智慧理財體驗。此外,還可依需求串聯實體分行,由專人提供即時協助。「我們將以使用者視角持續優化Fubon+ App,同時,攜手跨業合作夥伴一同滿足使用者在不同生活場景的金融需求,如旅遊金融等,成為真正『懂你』的智慧生活金融助理。」關於Fubon+ App的未來發展方向,周郭傑如是總結。

了解更多Fubon+ >  https://fubonapp.taipeifubon.com.tw/

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
電商終局戰
© 2025 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓