ElevenLabs推出App了!把論文、小說秒變Podcast、這間AI語音新創厲害在哪?
ElevenLabs推出App了!把論文、小說秒變Podcast、這間AI語音新創厲害在哪?

AI語音新創ElevenLabs推出首款語音閱讀器「ElevenLabs Reader: AI Audio」,導入ElevenLabs的AI語音庫,這款App可以流暢朗讀任何文本頁面,包括網頁文章、新聞、報告或研究論文,甚至是書籍小說、email等,直接變成有聲書或Podcast聆聽。

用戶只需要將想要收聽的內容網址複製到App上,或是上傳 PDF、ePub檔案格式,並提供多種人聲語音搭配不同的文字情境、情緒和場合,從口音、說話速度到語氣都可以自由控制,例如用專業聲音口吻閱讀商業報告,或變身教授大聲朗讀教科書,甚至是自己本人的聲音都可以加入導讀。

ElevenLabs Reader: AI Audio目前僅提供iOS英文版本,Android用戶則可以加入體驗候補名單。ElevenLabs表示,未來將擴展支援29種語言。

AI語音市場在吸引大量資金投入。

新創ElevenLabs就是其中一個例子。團隊提供的AI工具,讓使用者自由創建跨語言、跨口音的AI聲音,吸引超過100萬用戶及100間的合作企業使用。

團隊在今(2024)年1月宣布在B輪融資中收到8,000萬美元(約新台幣25億元),主要投資人包含a16z、紅杉資本、前GitHub執行長Nat Friedman等。

掌握最新AI、半導體、數位趨勢!訂閱《數位時代》日報及社群活動訊息

是什麼原因讓新創ElevenLabs在短短半年內,市場估值從原先的近1億美元,增長超過10倍達到11億美元,成為英國增長最快的獨角獸?

新創ElevenLabs成英國最新獨角獸,成員專業技術及未來明確規劃打動創投的心

語音新創ElevenLabs主打利用生成式AI製作語音模型,使用者可導入欲作為範本的聲音片段或使用範本庫中的檔案製作出新的語音,應用於AI配音、新聞報導、有聲書朗讀等領域。

elevenlabs使用
語音新創ElevenLabs和大多語音新創一樣,主打導入不同聲音段製作全新的人造聲音,使用者可將新創的聲音進行微調,並以此做為基底建立公司專屬的語音模型,應用於AI配音、新聞報導、有聲書朗讀等領域。

新創ElevenLabs於2022年創立,至今已累積超過100間合作企業,其中包含華盛頓郵報、有聲書品牌Storytel、遊戲發行商Paradox Intereactive等。

儘管AI語音不算新題目,ElevenLabs團隊之所以能吸引到眾多投資人的支持,原因與團隊創辦人背景相關。

ElevenLabs團隊的成立源自於兩位多年好友,前Google機器學習工程師Piotr Dabkowski,及前Palantir員工Mati Staniszewski,出身於波蘭的兩人對美國電影中不和諧的波蘭配音感到困擾,希望利用自己對AI技術的認識改變現況。

elevenlabs共同創辦人piotr dabkowski及mati staniszewski
ElevenLabs共同創辦人Piotr Dabkowski(左)及Mati Staniszewski(右)。

ElevenLabs團隊的投資人Concept Ventures在官網宣布ElevenLabs最新募資消息時提到,創辦人特質是他們決定是否加入投資時的決定因素。在Piotr Dabkowski及Mati Staniszewski發現配音市場的不足時,ElevenLabs團隊對其未來的明確願景及團隊成員擁有的專業知識深深吸引創投的注意。

另一位投資人a16z同樣在官網上表達對ElevenLabs團隊的肯定,ElevenLabs團隊擁有機器學習及大型系統運作的專業知識,改變現有的文字轉語音(TTS)模型,使其創造出的新聲音具備自然的語氣停頓、呼吸,期待未來ElevenLabs能擴大可應用的語言範圍,打破現有語音市場的限制。

語音新創不可避免的濫用問題,ElevenLabs積極推出應對措施避免影響擴大

儘管新創ElevenLabs在2024年初成為眾所矚目的新創獨角獸,但同所有AI語音新創,團隊同樣身陷技術濫用的爭議中。

美國最大匿名網路論壇4chan因長期充斥種族歧視言論備受討論,包含利用如Emma Watson、Joe Rogan等名人聲音散佈含有種族歧視內容,不久前被爆出有些上傳到該論壇的深偽影片中是透過ElevenLabs所推出的beta版軟體所製成。

儘管這並非ElevenLabs團隊研發新技術的初衷,但考量到其技術創造出的高品質音段及創造新聲音的簡易性,深偽音訊(deepvoice)問題成為眼下急需解決的問題。

因應這項問題,新創ElevenLabs以AI Speech Classifier為名,推出可偵測音段是否經過ElevenLabs軟體加工的API程式,協助使用者辨認經變造後的聲音。同時團隊也預計推出如付費版使用驗證、完成後作品附上創作者ID及增加手動批准聲音複製要求等功能,避免技術被濫用問題。

除了謹慎注意任何技術濫用的消息外,Piotr Dabkowski也在官網聲明中提到,團隊未來亦將利用一部分收到的新資金加強安全措施的推出,並藉由推動團隊研究計畫、擴大現有基礎建設及開發新垂直領域的新產品,確保AI技術在正確的軌道上發展。

資料來源:《TechFundingNews》、《VentureBeat》、《Crunchbase》、《Vice》、《TechCrunch》、《Futurism》、《Sifted》、《Fast Company

責任編輯:蘇柔瑋

關鍵字: #AI
往下滑看下一篇文章
數據驅動體驗升級!全台唯一上櫃電商「美而快」如何打造成長引擎
數據驅動體驗升級!全台唯一上櫃電商「美而快」如何打造成長引擎

當電商市場告別流量紅利,企業的成長路徑也面臨改變。廣告投放的邊際效益不再、社群觸及率下滑,加上第三方 Cookie 的正式退場,使得傳統「廣撒網」的行銷模式失靈。面對變局,擁有百萬會員的服飾集團美而快,在導入直通國際ESi的一站式 CDP(Customer Data Platform)後,有效提升分眾溝通效率與顧客經營精準度,讓數據應用從行銷部門逐步滲透至營運節奏規劃,成為推動企業成長的新引擎。

流量為王的時代過去,顧客經營必須深化

「這幾年電商獲客成本增加很多,品牌若無法將流量轉為有效會員,很快會失去競爭力。」美而快總經理王志仁指出,在數位廣告成本飆升、新客轉換日益困難的趨勢下,「私域經營」就成了品牌必修課;依賴流量已不夠,如何讓顧客留下、回購、持續互動更是關鍵。

為了深化會員經營,美而快團隊開始深入分析會員行為,區分出長期未購、已回訪未結帳、潛在高價值等類型客群,再依據行為進行對應溝通與內容推播。然而,分眾管理極為繁瑣,需仰賴大量人力與反覆操作,「每天都得手動撈資料、打包受眾、分眾投遞。」王志仁直言,這是一項曠日費時、卻無法逃避的任務。

直通國際
圖/ 數位時代

對此,美而快選擇導入直通國際的客戶數據平台 CDP,以系統思維出發,打造可長期營運、可擴張、可迭代的顧客管理模式。

對美而快而言,導入 CDP 後最直觀的改變就是「效率」。例如:過去每日需手動處理的「180 天未購會員」分眾任務,現在可藉由自動化流程完成,釋放行銷人力,專注策略性規劃。同時,團隊也開始盤點冗餘的 LINE OA 投遞對象,刪除一年以上無回應的 LINE 會員,反而讓開封率與點擊率雙雙提升,ROAS 更一舉翻倍。

打通線上、線下任督二脈,CDP 為 OMO 鋪路

當 CDP 不再只是行銷工具,而是轉變為驅動企業營運的中樞系統,其價值即體現在資料整合、流程優化與策略制定的全面提升。美而快導入直通國際 CDP 後,另一個有感的突破就是線上、線下數據的打通,成功串聯集團旗下多元品牌通路,重構消費者旅程。

以 2023 年底開幕的 UR Living 實體門市為契機,美而快同步推動 App 積點與會員綁定機制,鼓勵實體顧客登入線上會員系統;同時,透過 CDP 將線下交易資料完整回收,不只實現會員輪廓識別,也為 OMO 策略奠定基礎。這套整合機制迅速展現成效——以主力品牌 PAZZO 為例,實體店開幕後,線上會員與營收成長 25%,其中近半新客來自實體通路。

「線下其實是很有效的新客來源,像 PAZZO 的新會員裡,有一半都是從線下來的,」總經理王志仁分享,若從會員結構觀察,不同品牌在線上、線下的表現其實有所差異,例如 PAZZO 線上與線下客群各占一半,而部分新品牌則在線下更具導流優勢。

有了 CDP 整合數據,美而快得以建立「雙向引流、數據貫通」的 OMO 策略,聚焦顧客行為與場域偏好,讓每一個接觸點都更精準、更有價值。

CDP 驅動商品決策,預測力成關鍵競爭力

讓數據真正驅動企業運作,關鍵在於能否跨出行銷部門,擴展至商品、內容與營運等決策核心。對美而快而言,這樣的延伸雖仍在逐步建立,卻已有方向。

服飾業的商品多為非結構化資料,細節如剪裁、材質、風格等變化極大,加上時尚週期更迭快速,除了基本的品類與顏色,很難建立細緻穩定的分類模型。即便如此,美而快仍透過 CDP 進行購物行為分析,掌握哪些商品高瀏覽但未轉換、哪些品項吸引新客,並回饋給內容與商品團隊,作為優化依據。「我們希望透過 CDP 協助商品開發,更細緻地理解交易失敗的新客行為,去改善、去優化,」王志仁表示。

「對零售業來說,不管是 AI 還是數據,最終目標都是『預測』。預測商品熱度、預測顧客行為、預測營收走向——能預測,才能控制成本、降低風險。而『數據』是每天必須做到的基本功。如果沒有奠定基礎,就無從發揮後續價值。」王志仁強調,一步一步把數據的基本功打穩,紮實累積、系統性整合,CDP 才能發揮價值,為預測力打下基礎。

追蹤我們
AI全球100+台灣50
© 2025 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓