蘋果更新5大系統!可用Mac操控iPhone、iPad支援手寫公式計算,WWDC亮點整理
蘋果更新5大系統!可用Mac操控iPhone、iPad支援手寫公式計算,WWDC亮點整理

蘋果(Apple)開發者大會WWDC正如火如荼舉行中,除了iOS外,旗下OS系統陣容也全面祭出更新,包含macOS 18、ipadOS 18、visionOS 2、watchOS 11、Audio等,加強生態系互相協作的功能,也新增更多個人化設計的模式。

macOS 18:可以用筆電操作手機了

蘋果推出全新macOS,取名叫「Sequoia」(紅杉),多項生態系整合功能, 其中最受矚目的,就是讓Mac筆電和iPhone手機進一步整合,推出「鏡像輸出」功能。

簡單來說, 就是能直接用筆電連接、操控iPhone手機,類似於桌面模擬器的介面,但用戶可以直接瀏覽手機畫面、使用App內容、回應訊息等,甚至調整設定,使用這項功能時,iPhone會保持鎖定狀態。

蘋果WWDC 2024 macOS Sequoia
macOS Sequoia讓Mac和iPhone整合,可以直接操作手機。
圖/ 蘋果WWDC2024發布會

ipadOS 18:手寫算式、計算機靈活應用

ipadOS這次更新,讓不少理工科系學生和工作者歡呼,因為iPad終於史上第一次擁有計算機功能,更大的介面進行運算。除此之外,更推出「Math Notes」功能,讓用戶在黑板上手寫數學公式,系統會自動辨識、寫出答案,可以隨意調整變量,數字都能馬上更新。

蘋果wwdc 2024 ipadOS mathnote
打開iPad上的計算機,可以調整為note模式,手寫算式進行計算。
圖/ 蘋果
蘋果WWDC ipadOS mathnote
ipadOS的math note功能可以製作和計算圖表上的數學公式。
圖/ 蘋果

Smart Script技術,則是藉由深度學習等技術應用,由系統分析、學習使用者書寫字跡,後續書寫字跡會變得更好看、易懂,甚至可以透過鍵盤輸入,以你的個人字跡呈現輸入內容,並進行後續修改、調整,等於是擁有一套專屬自己的字體。

蘋果WWDC 2024
iPad可以學習用戶的手寫字體,並自動協助調整。
圖/ 蘋果

visionOS 2:多地啟售Vision Pro、新增更多空間運算應用

在美國才發售4個月的Vison Pro,6月開始鋪貨到中國、香港、日本與新加坡,下個月則輪到澳洲、加拿大、法國、德國與英國,同時,今年秋天會釋出可免費升級的visionOS 2,迎來第二代的系統更新。

visionOS 2利用空間運算技術,平衡雙眼的視覺效果,讓用戶可以把自己相簿中的2D照片,直接轉換成立體的「空間照片」,從多視角觀賞,如果透過 SharePlay和朋友分享,可以讓友人的虛擬形象坐在身邊,身歷其境。

蘋果WWDC 2024 visionOS
visionOS讓平面照片以立體多角度方式呈現。
圖/ 蘋果WWDC2024發布會

如果想利用visionOS來使用Mac,虛擬螢幕的畫面也變得更大,提供更多比例選擇,輕鬆獲得一款大型曲面螢幕方便作業。

蘋果WWDC 2024 visionOS
visionOS 2中提供mac螢幕畫面更大的比例。
圖/ 蘋果WWDC2024發布會

另外,也新增全新的手勢操作方式,過去VisioPro只能辨識兩指輕觸的控制方法,如今新增手背翻轉的操作,可以快速開啟Home View與控制中心。

watchOS 11:訓練模式、報表供追蹤

watchOS 11更新重點仍是健康功能,新增訓練模式,讓使用者可以調整訓練難易程度,並提供報表,協助了解過去一周到一個月的運動,對身體造成的影響。

血氧濃度、心率、睡眠時間和呼吸速率等指標,現在也以一週為單位,顯示這些數值的上下起伏,並每週整理成報表方便追蹤確認。

蘋果WWDC 2024 watchOS
watchOS可調整訓練模式強度。
圖/ 蘋果
蘋果WWDC 2024 watchOS
watchOS提供報表檢視訓練成果。
圖/ 蘋果

在watchOS 11中也推出個人化設計的新功能,錶面會用機器學習分析數千張照片,並根據美學、構圖和照片表情等辨識出的資訊提供最佳照片的建議,同時也提供時間大小、位置、字體等個性化錶面設計模式,現在也提供iPhone擁有的「動態模式」,每次喚醒都會更換錶面照片。

蘋果WWDC 2024 watchOS
watchOS提供更多元的錶面設計。
圖/ 蘋果WWDC2024發布會

另外,Apple Watch 還開放使用翻譯App工具,可以直接在錶上切換20種語言,成為隨身翻譯機。

Audio:搖頭點頭操作AirPods、語音隔離功能

AirPods新增全新的互動方式,可以用點頭、搖頭操作,例如回應Siri對話、點頭接電話、搖頭拒接等,當用戶不方便用手控制手機的場景時可以操作。

airpods 3
airpods新增點頭、搖頭操作模式。
圖/ 愛范兒

同時,AirPod Pro加入Voice Isolation語音隔離降噪功能,提升通話品質。

延伸閱讀:影片|蘋果大開ChatGPT外掛,為何馬斯克要抵制?Apple Intelligence有多厲害?WWDC亮點一次看

責任編輯:李先泰

往下滑看下一篇文章
用眼神操控未來!見臻科技如何打造全球最小眼動追蹤技術,踩在AI浪潮下搶攻人機互動新契機
用眼神操控未來!見臻科技如何打造全球最小眼動追蹤技術,踩在AI浪潮下搶攻人機互動新契機

隨著眼動追蹤技術(Eye Tracking Solution)的成熟,讓智慧穿戴裝置邁向更精準、個人化的互動體驗。晶片不僅驅動產業升級,也將改變與世界互動的方式。2024年,經濟部產業發展署推動「驅動國內IC設計業者先進發展補助計畫(以下簡稱晶創IC補助計畫)」,鼓勵業者開發具國際高度信任,以及可促進產業發展之晶片。其中,見臻科技以全球最小的眼動追蹤技術脫穎而出,將AI與影像感測技術導入擴增實境與虛擬實境(以下簡稱AR/VR)與智慧眼鏡領域,開啟智慧穿戴裝置的新篇章。

「如果滑鼠、觸控能變成一種控制方式,那麼眼睛為什麼不行?」見臻科技執行長簡韶逸一開始便點出了團隊創立七年來的技術主軸,團隊的核心命題,正是要全力打造一種可以用眼神交流的互動介面,為市場與產業帶來全新可能性。

回首創業之初,曾是臺大電機系教授的簡韶逸,帶著一群學生、拿著第一筆資金,跳脫舒適圈勇敢創業。他捨棄了市場上常見的多紅外線光源角膜反射定位方法,轉而採取鏡頭與自家AI演算法的搭配,瞄準AR/VR並可導入智慧眼鏡,力求產品能更輕、更簡單,以期在未來進行各種場景應用。短短數年間,見臻科技就獲得到奇景、仁寶與緯創等大廠的青睞與投資,也讓過去只出現在《復仇者聯盟》電影的場景,變得不再遙不可及。

以眼球追蹤為關鍵技術,見臻科技搶進AR/VR市場

簡韶逸表示,見臻科技的眼動追蹤技術已是一套能走出實驗室、嵌入日常眼鏡的解決方案。團隊以「最小化」、「最易整合」為目標,透過自研演算法與攝影鏡頭組成的模組與感測器元件,在維持精準度的前提下,大幅降低體積與功耗,成功打造出目前市面上體積最小、最適合眼鏡整合的追蹤模組。

以他們於2022年推出的首款穿戴式產品「Sol穿戴式眼動追蹤裝置(SOLGlasses)」為例,內建高達120Hz眼動資料取樣頻率的感測器、1.6M超廣角前鏡頭、陀螺儀與麥克風模組,不僅能即時捕捉視線與周邊環境的交互資料,更能協助研究者進行行為分析與情境推估。「我們也在商業市場之外為這項解決方案找到了不同切角,」簡韶逸表示,包括心理、教育、運動科學等不同領域,都有採用這項技術,掌握受測者、消費者的眼球移動,是開啟所有後續研究或商品應用的關鍵起點。

而正是這些來自研究場域的實測回饋,讓見臻科技累積了大量真實數據,能不斷優化演算法準確度,最終使得小型化模組在效能上,與傳統大型方案不相上下,甚至更具效率與彈性。「我們的模組只用了四顆零組件,卻能實現與傳統十幾顆LED方案相近的追蹤準確度,這就是AI模型訓練與架構優化的成果。」簡韶逸說。

不過,要讓眼動追蹤技術真正從單一模組擴展到大規模裝置應用,還有一道無法忽視的門檻:晶片。簡韶逸深知,若要進一步降低功耗、加快反應速度、提升模組整合性,自行研發AI晶片會是邁向下一階段的關鍵。只是對新創團隊來說,開發一顆專用晶片的難度與資源門檻,從來都不是輕鬆的挑戰。此刻的他需要對外尋找技術與資源上的實質助力。

爭取政府主題式研發計畫資源研發第二晶片模組,實現穿戴裝置AI邊緣運算

見臻科技以全球最小眼動追蹤技術,打造下一代智慧眼鏡互動體驗。
見臻科技以全球最小眼動追蹤技術,打造下一代智慧眼鏡互動體驗。
圖/ 數位時代

正因台灣具有完整的ICT產業鏈與研發人才,方能在短時間內完成從設計、驗證到打樣的整合流程,見臻科技憑藉著這樣的優勢,在和以AI晶片為技術強項的奇景光電合作下,開發出第一代通用型晶片模組,透過自研演算法搭配市面通用晶片,實現眼動追蹤技術的小型化與即時運算功能,「想讓終端應用與演算法深度結合、並具備低功耗、高整合特性就必須研發AI晶片」,簡韶逸說。

簡韶逸知道即使供應鏈資源易找,但身為新創仍有募資規模不大的挑戰,想要開發晶片對見臻科技來說仍是沈重的負擔。「所幸有晶創IC補助計畫的幫助,才能讓這個想法加速實踐。」簡韶逸以穿戴式眼動追蹤解決方案作為提案,成功獲得計畫審查委員的肯定,讓團隊在研發二代AI晶片的路上可以走得快也走得穩,做好資源與風險管理。

在這個第二代晶片模組中,搭配自家AI模型與低功耗運算架構的嵌入,打造出邊緣裝置,能同時將AI晶片、感測器與鏡頭巧妙的隱藏在眼鏡的不同角落,包括鼻墊、鏡框或是鏡腳,這個穿戴式眼動追蹤解決方案的產品,成了一個既省電、體積又小、算力也足夠,且不需任何雲端傳輸就能完成眼動資料推算的設備。

簡韶逸表示,2023年AppleVisionPro的發表,讓眼動科技正式跨入了主流使用者介面(UI)設計,過去觀望的業者也紛紛積極詢問。而早已投入眼動追蹤技術的見臻科技,也在這個第二代晶片模組引領下,瞄準未來AR/VR的商業應用,預計將於2025年下半年完成第二代晶片模組開發,並在2026年進入市場推廣與應用階段。

加入優勢晶片研發應用生態圈,共同打造人機互動新藍圖

見臻科技之所以卓越,來自一群專業且默契十足的堅強團隊。
見臻科技之所以卓越,來自一群專業且默契十足的堅強團隊。
圖/ 數位時代

為了與更多潛在供應鏈夥伴交流,見臻科技也加入了「優勢晶片研發應用生態圈」,成為其中一員。簡韶逸興奮的說,這讓團隊得以參與更多產業對話與商機媒合的機會,並期待能透過生態圈的助攻,串連更多AR/VR供應鏈夥伴,建立從晶片、模組到整機的快速整合能力。

對簡韶逸而言,眼動追蹤技術從不只是輔助功能,而是迎接AI浪潮下一個重要的感知與控制介面。伴隨著晶片、模型與整合技術的逐漸成熟,他也預期接下來的兩到三年,將是眼動追蹤技術全面進入消費市場與垂直應用的爆發期。在趨勢浪潮與團隊資源的推動下,簡韶逸正逐步實現他所描繪的人機互動新藍圖,而政府計畫資源的挹注與自身的技術實力在其中發揮了關鍵作用。

|企業小檔案|
- 企業名稱:見臻科技
- 創辦人:簡韶逸執行長
- 核心技術:眼動追蹤技術(Eye Tracking Solution)
- 資本額:新台幣2.7億元
- 員工數:30人

|驅動國內IC設計業者先進發展補助計畫簡介|
在行政院「晶片驅動臺灣產業創新方案」政策架構下,經濟部產業發展署透過推動「驅動國內IC設計業者先進發展補助計畫」,以實質政策補助,引導業者往AI、高效能運算、車用或新興應用等高值化領域之「16奈米以下先進製程」或「具國際高度信任之優勢、特殊領域」布局,以避開中國大陸在成熟製程之低價競爭,並提升我國IC設計產業價值與國際競爭力。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
蘋果能再次偉大?
© 2025 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓