嫌自學太難?台灣人創業用AR玩鋼琴教學,奪微軟全球開發者大賽冠軍
嫌自學太難?台灣人創業用AR玩鋼琴教學,奪微軟全球開發者大賽冠軍

除了找家教、看影片之外,現在還有一種全新方式,用擴增實境學(AR)學鋼琴。

透過AR直接在鋼琴琴鍵上產生「垂直虛擬記號」,就像音樂類遊戲一樣,會有即時提示出現,讓使用者可以掌握彈奏時機;進階學習者也可以選擇虛擬樂團幫你即興伴奏,創作不同體驗。

這套軟體叫做Music Everywhere,目前在微軟HoloLens商店上架,使用時除了需搭配AR眼鏡,還要擁有一台具備藍牙功能的鋼琴,才能夠傳輸MIDI訊號(樂器數位介面)。

用AR學鋼琴的創意教學系統,擊敗一千多名來自世界各地團隊,獲得2017年微軟的HoloLens開發者大賽全球第一名,並得到十萬美元獎金。另外,也曾到舊金山的遊戲開發者大會(GDC)、哥本哈根的國際創新音樂表現介面大會(NIME)及洛杉磯的計算機圖形大會(Siggraph)展出,陸續受到矚目。

AR鋼琴的嶄新教學設計,更有台灣創意在裡頭。

解決自學痛點,他們想出用AR玩鋼琴教學

27歲的蕭富彥,過去在美國匹茲堡就讀卡內基梅隆大學的娛樂科技(entertainment technology)碩士班,他和兩名共同創辦人在為期15週的專案裡,打造出AR鋼琴教學系統的雛形,並於2017年4月正式成立新創公司Music Everywhere。

AR鋼琴 Music Everywhere團隊
Music Everywhere三名共同創辦人:賽斯‧葛立克曼(圖左)、蕭富彥(圖中)、李炳萬(圖右)。
圖/ Music Everywhere

三人的共同特點是:熱愛音樂。

蕭富彥喜愛吉他,擔任創意長角色、執行長賽斯‧葛立克曼(Seth Glickman)是畢業於紐約茱莉亞音樂學院的作曲家、技術長李炳萬(Byunghwan Lee)來自韓國,是一名喜歡合成器的遊戲工程師。

由於對音樂的熱情,他們觀察到現在的鋼琴自學方式,仍有許多不方便之處。例如用手機、平版觀看教學影片時,學習者必須不斷移動視線和轉動身體,輪流盯著鋼琴與電子螢幕,無形中增加了許多吸收資訊的困難,同時也不夠直覺,因此興起創業念頭。

「技術挑戰在於,AR顯示器的視野範圍很小,大約不到35度,該如何妥善利用HoloLens的追蹤功能,又不讓虛擬資訊因為角度問題(field of view)被『切掉』,需要反覆的設計。」蕭富彥說。

但 Music Everywhere 仍努力克服技術困難,順利創造出鏡射琴鍵的功能,目前也正打算開發比照真人彈奏的模擬手勢,讓學習者能夠有更精緻的學習感受。

AR裝置門檻高,挑戰市場接受度

只不過,比起技術難題,團隊真正的挑戰在於市場的接受度,以及AR裝置的普及時程。

「我們的目標客群是那些希望享受音樂的人。」蕭富彥坦言,AR應用在建築、醫療、機械等領域比較熱絡,因為擴增實境能讓平面圖資立體化,「而音樂領域不只在美國很少人碰,其他國家的嘗試也不多。」

AR鋼琴教學系統
Music Everywhere的AR鋼琴系統,能讓虛擬樂團和教學指令垂直呈現在鋼琴上方,解決視線轉換的學習問題。
圖/ Music Everywhere

Music Everywhere團隊認為,這是很大的挑戰,卻也是機會。

蕭富彥表示,HoloLens擁有良好的空間追蹤技術,但因為裝置價格偏高,在美國每台售價約5千美元(約14萬新台幣),因此在市面上AR頭戴裝置未普及的情況下,不太可能直接推廣至消費者家中。

目前,Music Everywhere 正在美國各大學、藝文中心等地方推廣,希望先讓外界了解AR科技對學習音樂的幫助,接下來也將持續推出吉他、鼓類學習產品,提升教學系統能見度。

他們從2017年7月開始,進駐匹茲堡加速器Alpha Lab,獲得投資與創業輔助訓練,同時也獲得不少AR硬體廠商接洽,正持續拓展出路。

「 音樂市場雖然小眾,但是不代表科技沒有機會改變它。」蕭富彥看好在2020年左右,就會是AR應用快速融入市場的絕佳時機。

關鍵字: #微軟 #VR_AR_MR
往下滑看下一篇文章
我們不一樣!安排健康檢查前,項目怎麼選?用數據啟動「個人化健康」新趨勢
我們不一樣!安排健康檢查前,項目怎麼選?用數據啟動「個人化健康」新趨勢

健康檢查是守護身體的第一道防線,但面對琳瑯滿目的項目清單,醫療名詞艱澀難懂,多數人往往只能被動接受既有的「固定套餐」。擁有全台超過 3 億筆健康大數據的國泰健康管理,瞄準民眾在安排健康檢查前「健檢項目怎麼選」的痛點,以科技驅動打造智慧化「衡好選」健康規劃系統。這套由國泰研發、提供給大眾與合作醫療機構使用的軟體服務,主打「好懂、好選、好預約」,徹底翻轉傳統模式,讓個人化健康規劃真正達到量身訂做,並且已獲得國家專利。

顛覆傳統制式框架,大數據導航篩選「健康優先級」

國泰健康管理數據智能發展部資深協理郭怡賢直言,傳統安排健康檢查時「一體化套餐」的局限性,他不僅深有感觸,更是親身經歷者。即便具備專業背景,一般人面對健檢項目怎麼選,仍難以摸透其中的「眉角」。

他分享了一段來自內部的真實轉折:公司內部夥伴曾因專業的評估建議,加選了過去從未、也從沒想過要關注的指標,竟因此及時察覺關鍵的身體訊號。這類真實故事不斷上演,讓團隊深刻體認到,若僅依賴固定的框架,極可能漏掉重要的資訊。這些服務經驗與真實痛點,成為決定打破過去選擇框架、將專業「大腦」轉化成數位導航的核心動機。

郭怡賢深刻分析,健康管理的本質是一條嚴謹的價值鏈:由「健康發現」啟動,進而達成「日常落實」的目標。他指出,若前端的「需求篩選」不夠精準,後續所有的行動都將失去支點。傳統模式最大的戰略盲點,在於忽視了個體生理狀況與生活習慣的差異,導致受檢者往往處於資訊被動地位。國泰投入研發『衡好選』系統的核心起心動念,就是要打破僵化的框架,利用數據導航協助每位使用者進行個人化健康規劃,讓選擇從『被動接受』,進化為真正意義上的『個人化規劃』。

過去制式套餐常讓大眾因擔心選錯項目而不安,動輒花上數小時解決疑問。透過這套軟體系統融合大數據與專業經驗,將數百項知識轉化為 24 小時在線的「數位大腦」。這不僅突破了服務量能限制,更確保每位使用者隨時都能獲得「不一樣」的個人化篩選建議。

#1 國泰健康管理
圖/ 國泰健康管理

推動健康白話文運動,讓健康規劃好懂、好選擇

近年來健康服務琳瑯滿目,為什麼國泰可以直擊痛點,大膽提出變革?國泰健康管理成立近 15 年來,累積了超過 3 億筆大數據,這不僅只是數據的累積,更是服務經驗的結晶,以及客戶面對龐雜資訊時常見疑惑的解答。透過成熟的科技,「衡好選」系統應運而生,「我們的核心概念是好懂、好選,一次解決傳統選擇上的兩大痛點。」

「衡好選」系統從每個人的生活背景下手,先透過個人體況及家族病史的簡單問答,了解個人狀態,最後加入十大死因等潛在風險資料。綜合評估後,依據客戶的年齡、性別和地區,推算出專屬的指標關注方向,再從數百項選項中精準排序,為客戶「篩選健康優先級」,使用者也能依據推薦再靈活調整。郭怡賢笑說,「就像數位導航一樣,主動提供客製化的推薦,然後依需求自由配置!」

此外,健康項目的說明往往充滿生硬的醫療用詞,這也是國泰在系統進化中花最多時間調整的部分,「我們稱之為『白話文運動』。」國泰與專業團隊梳理,用簡單卻精準的白話指引,把 300 多個項目一一解釋清楚,讓大眾一看就知道為什麼自己的體況需要關注這項指標。而且透過系統選完方案後,就能直接向合作醫療機構預約,方便即時,打造一條龍的便利體驗。系統內還有即時線上小助手,有任何疑惑都能直接諮詢,宛如多了一個 24 小時在線的專屬服務人員。

#0 國泰健康管理
圖/ 國泰健康管理

全新品牌精神上線,喊出健康新哲學「Happy Habit」

從「衡好選」系統的智慧規劃到數位日常工具的全面支持,國泰健康管理將顛覆傳統健康管理的模式,賦予全新的品牌精神「Happy Habit」 ,訴求健康應是快樂、來自每一天一點的生活累積,用輕鬆簡單的方式 。讓大眾透過精準的健康規劃找到正確的方向 ,並運用每日陪伴的數位健康工具,找到專屬自己的快樂生活方式 。

未來,國泰健康管理除了與醫療機構合作,還會更進一步進化,與不同產業和通路展開深度合作,將健康規劃真正融入到生活場景中 ,透過科技系統的協助,讓人們在飲食與日常作息中,輕鬆找到更適合自身健康的選擇 。藉由攜手不同的跨界夥伴,國泰健康管理致力於為客戶提供完整的全方位解方,「我們想打造的是一個完整的健康生態圈!」

在數據與科技的加持下,國泰健康管理讓健康管理不再只是單次的檢查安排 ,而是轉化為融入生活、隨時陪伴的健康夥伴 ,不僅更加貼近客戶的真實需求,也賦予健康管理嶄新的面貌,為產業開創全新局 。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
代理式商務連動百兆商機
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓