【黑貘來說】 挖掘巨量資料的秘密步驟
【黑貘來說】 挖掘巨量資料的秘密步驟
2013.03.26 | 創業

現在已經有太多的報導說某某公司利用使用者的行為記錄,來算出每一個人的喜好,並且導出商機等等新聞到處可見,但我相信大家看再多次,不是覺得這樣會不會太可怕了?不然就是這好厲害阿!這兩種答案,不然就是兩種都有。

但事實上這件事並不神奇或可怕,會覺得這樣是因為大部份的人不知道怎麼做,或者是說這能夠做甚麼,若是你知道後,發現這跟本只是個套來套去經過計算的結果,甚至在某方面你用手來算都可以,只是不一樣的是人只能處理少量資料,而電腦可以處理巨量資料,當很多事情會有量變產生質變的時候,威力就在此顯現,但這些步驟,說穿了一點都不聰明,甚至還非常的機械化的制式。

當然我不是很好的深入淺出的作者,所以沒辦法寫給大多數的讀者看,而是寫給已經有一點實務經驗的人,尤其是程式設計師或資料庫管理師等工程師,但若沒有這技術背景,我相信做這樣的拆解,可以讓大家從一知半解變成知道個大概,而透過這樣的了解,讓大家有機會去應用是我寫這幾篇的目的。

只是還有一個前提,就是我不會在這邊寫資料探勘的基礎,也就是說,「請先去看本資料探勘的書」,再來看下面幾篇文章吧。

目標:能夠知道某個特定人喜歡甚麼東西,購買每一個商品的機率,或者是說我們該如何推薦商品給他,以及知道他喜歡這商品的原因?

人與商品之間的行為有下面幾種:

  1. 瀏灠
  2. 放入清單
  3. 購買
  4. 評價或評論
  5. 其他

    上面每一種行為都有其數量化的差異,有些是一年幾次,幾十次或到幾百次或更多,而每一個行為都可能有個 「權重 (Weight)」,以及時間 (Time) 與次數 (Times) 的屬性,甚至更有可能是一個 Vector (向量) 的指標,例如喜好、觀感等等,無論是可以量化或不能量化,這些都可以成為建立人與商品的「關連」。

    所有的資料探勘系統實作都是從這些資料做轉化,甚至是簡化,畢竟可以運算,以及算得出結果才是重點,甚至是能夠算給所有消費者顧客使用才是資料探勘的精隨。

    但有趣的事是很多實用的系統都很少是用單一方法去建構出來的,畢竟除了人的行為之外,商品有有幾個屬性:

  6. 商品本質、內容

  7. 商品描述 (meta-data) 與分類
  8. 最後才是商品的使用

    在還沒有 Semantic Web 之前, 我們能用的就是商品的使用,也就是我們使用者/消費者與商品/物品之間的關係,而在有了語意網路之後,我們就可以進一步的處理本質 (文化商品) 與描述了,只是在這之前還要有幾個前置作業。

  9. 會自動化新增關鍵字詞的表

  10. 會自動化連結出語意網路的表

    這兩個表若是可以扣掉前面「會自動化新增/連結」 的話,我相信很多人都有從很多單位去取得這樣的詞庫與關連庫,但在實務上我們有絕大部份的狀況都是在處理運算最新的商品或議題時,沒有一種機制能夠新增或更新的話,幾乎是不實用的。

    只是這新增/更新有時不見得是自動化,因為自動化是件相當困難的事,就我所知有不少在做這項業務的公司單位,用的就是「工人智慧」,而不是人工智慧,但無論如何,有了這兩個表之後,再加上從資料探勘能夠得知的:

  11. 關連分析 (一階, 或高階)

  12. 群落分析 (Clustering)
  13. 時間序列預測

    有了上面三個很基本的工具後,可以配合產出很多的可能性:

  14. 最常見的關連購買

  15. 在搜尋結果中做排序
  16. 從分類結果做語意分析產出因子
  17. 有了高階的關連分析可以透過配對做活動
  18. 從銷售預測中作備品或庫存準備
  19. 只要你想得到的

    當然上面說得很簡單,好像是三兩天就可以開發出來的東西,但事實上單單一個「會自動化連結出語意網路的表」,我記得當時就弄了兩三個月才弄出來,當然現在再弄一次就只須要兩三天到兩三個星期了,畢竟有經驗跟沒有經驗還是差很多的。

    記得我在 5 年多前寫過 Data Mining 是一個須要跟效率挑戰的高度技術的事,但現在的機器已經比 5 年前快 5 倍了,加上資料庫的多樣性,雲端系統的完善,讓寫這樣的系統跟之前簡單不只 5 倍,我在兩個月以前自己從無到有又自己跑一次,以前須要半年的現在只要半個多月就夠了,想想時代還真可怕阿。

    所以說,在這樣成熟的時機而言,導入真正的巨量資料探勘已經不是預算的問題,也不是技術的問題,而是心態的問題了,你準備好了嗎?

轉自[黑貘來說](http://gene.speaking.tw/2013/03/blog-post_20.html)
關鍵字: #大數據
往下滑看下一篇文章
AI造浪席捲跨境電商!亞馬遜揭「科技、價值、信任」三大趨勢,引領台灣企業搶賺全球商機
AI造浪席捲跨境電商!亞馬遜揭「科技、價值、信任」三大趨勢,引領台灣企業搶賺全球商機

台灣有無數「隱形冠軍」和世界級的製造實力,在各大產業中閃閃發光。但面對全球供應鏈重組、消費習慣碎片化,以及近年生成式AI的爆發性成長,台灣企業該如何將優質的硬實力,轉化為知名的品牌力?

為了因應相關議題,協助台灣中小企業尋找突破口,2026亞馬遜全球開店博覽會以「AI造浪,品牌出海」為主軸,舉辦豐富的講座、實際體驗和諮詢服務,吸引眾多渴望轉型出海、對進軍全球市場有強烈企圖的企業和品牌,共同與會。

代理式AI崛起,重塑購物旅程、企業營運模式

在開場講座中,亞馬遜全球開店台灣總經理謝孜希首先以「從台灣到全球,AI時代品牌跨境突圍實戰」為題指出,跨境電商已經從過去的「流量競爭」,正式進入「數據和智能驅動」的根本性轉變,「AI不只是輔助工具,還在全面重塑消費者的購物旅程和企業的營運模式,尤其『代理式AI』(Agentic AI)的崛起,將成為品牌連結全球消費者的關鍵。」她進一步解釋,過去的AI像被動的指令接收器,人下指令、AI接著執行;但現在的代理式AI,更像企業的營運夥伴、顧客的購物助理,能主動分析市場、規劃策略、自動執行任務,並在找出消費者的喜好自動下單。

amazon-2.jpeg
亞馬遜全球開店台灣總經理謝孜希表示:「AI不只是輔助工具,還在全面重塑消費者的購物旅程和企業的營運模式,尤其『代理式AI』(Agentic AI)的崛起,將成為品牌連結全球消費者的關鍵。」
圖/ Amazon

在亞馬遜上,Agentic AI讓消費者從普及的應用AI來搜尋,再到比較決策、進而購買商品。比方說,亞馬遜的購物助理Rufus AI,能根據消費者的搜尋動作判斷意圖,主動推薦商品,這讓使用Rufus AI的消費者,購買轉換率可比未使用的消費者提升逾60%,目前已有超過3億、97%的活躍用戶,透過Rufus AI進行消費決策。此外,亞馬遜還推出「Interests」功能,即使顧客不主動搜尋,這個AI私人購物助理也會24小時不間斷地幫忙逛街,並根據個人偏好推送新品、降價資訊,最終成功讓近20%的用戶,將推薦商品加入購物車。

謝孜希特別提到,亞馬遜的「Buy for Me」功能,已經從「資訊代理」進化成「行動代理」。根據最新數據統計,可以由AI代為完成購物的跨平台商品,已經超過50萬件,「這代表電商正從『關鍵字經濟』,變成『興趣經濟』、『AI代理經濟』。」

在賣家端,AI同樣展現強大價值,謝孜希透露,目前已有高達90萬名賣家導入亞馬遜的AI工具,包括能協助找出仍未被滿足需求的「商機探測器」、自動生成符合當地生活風格品牌場景圖的「A+內容」,以及能自動優化廣告素材的Ads Agent和Creative Agent等工具。這些代理式AI工具,平均每週能為賣家節省約5.6小時的時間,「賣家能將寶貴的時間,專注在更高價值的品牌決策和產品創新上。」

聚焦全球三大消費趨勢,台灣品牌迎來絕佳出海契機

了解AI如何改變規則後,謝孜希進一步分析,現今的全球消費趨勢,分別為高科技研發升級體驗、價值創新打造爆品和安全信任建立品牌,「這三大趨勢和台灣企業在技術、創新、品質上的優勢,完美契合。」

首先,當前全球消費電子市場規模已突破一兆美元,其中搭載AI的消費電子產品成長速度,更是整體消費電子市場的5倍。而台灣擁有全球最完整的PC和電子零組件供應鏈,占全球先進製程晶片製造的90%;根據財政部統計處2026年3月的最新統計,資通訊加電子零組件則占出口近八成。謝孜希以賣家「TRYX創氪星系」為例,指出品牌看準PC DIY市場長期陷入CP值和價格戰的痛點,決定專注高階玩家,推出全球首款「裸眼3D水冷散熱器」和L型曲面螢幕機箱,「TRYX創氪星系不跟風做低價競爭,反而善用亞馬遜商機探測器,預判消費者的需求,再用『技術』重新定義品類,並透過評論工具Vine快速建立信任。」進軍亞馬遜短短一年內,TRYX創氪星系的營收便成長了197%。

amazon-3.jpeg
「TRYX創氪星系」成長旅程,進軍亞馬遜短短一年內,TRYX創氪星系的營收便成長了197%。
圖/ Amazon

其次,消費者不再單純要求「低價」,轉而追求「超出期待的體驗」和「價值」。根據Deloitte的調查顯示,當品牌兼具創新力和信賴感時,消費者的年均支出會提升62%,且有近六成消費者願意為創新永續的產品付更多錢。健身器材熱銷全球80多國、累積千萬台銷量的居家健身品牌WONDER CORE,就是最佳的價值創新典範。

早在2009年,WONDER CORE就發現現代人居住空間變小,轉而開始研發小型健身器材,鑽研「讓健康變簡單」的解決方案。如今,WONDER CORE已有逾200項專利,更將硬體結合專屬APP,透過AI分析運動、飲食數據,提供客製化課程給消費者。

amazon-4.jpeg
累積千萬台銷量的居家健身品牌WONDER CORE,已有逾200項專利,將硬體結合專屬APP,透過AI分析運動、飲食數據,提供客製化課程給消費者。
圖/ Amazon

至於在年產值逾5500億美元的母嬰、寵物等市場,讓消費者買單的重點,是「安全」與「信任」。高達73%的消費者認為,品牌信任是影響忠誠度的首要因素,忠誠客戶的消費金額較一般消費者高出31%,回購率也大幅提升。台灣寵物品牌「超凝小姐Lady N」掌握安全、信任等要素,專注研發高品質的天然豆腐貓砂,便首創使用國際安全香氛協會認證的安全香氛,打破市場對香味貓砂不安全的刻板印象。儘管剛進美國市場前三個月的訂單只有個位數,但透過優質體驗帶來的口碑效應,曾創下24小時內狂銷數十箱的紀錄,以及10倍的銷售成長、高達60%的回購率。

amazon-5.jpeg
台灣寵物品牌「超凝小姐Lady N」專注研發高品質的天然豆腐貓砂,便首創使用國際安全香氛協會認證的安全香氛,打破市場對香味貓砂不安全的刻板印象。透過優質體驗帶來的口碑效應,曾創下24小時內狂銷數十箱的紀錄,以及10倍的銷售成長、高達60%的回購率。
圖/ Amazon

「AI結合品牌力,就是取得全球成功的方程式。」謝孜希鼓勵台灣企業善用亞馬遜的AI選品、代理式AI等工具,用數據驅動決策、掌握高成長品類,並從「Day 1」起,就具備建立國際品牌的視野,讓AI成為走向全球的加速器。

跨界對談傳授出海心法,善用數據、驅動決策

另外,博覽會還安排了由《數位時代》創新長黃亮崢主持,亞馬遜全球開店台灣總經理謝孜希、台北市進出口商業同業公會秘書長黃文榮、安克創新副總裁暨海翼電商執行長吳灼輝、嘖室營運長高立杰等專家,從不同角度探討企業的出海痛點並剖析各種AI應用。

amazon-6.jpg
由左至右,分別為嘖室營運長高立杰、安克創新副總裁暨海翼電商執行長吳灼輝、亞馬遜全球開店台灣總經理謝孜希、台北市進出口商業同業公會秘書長黃文榮共同與會、分享,並由《數位時代》創新長黃亮崢主持。
圖/ 數位時代

高立杰建議,剛起步的品牌在使用任何AI工具前,都應該先「認識自己」並「釐清品牌定位」。他指出品牌洞察到年輕人不喜歡被傳統業務推銷的痛點,因此創造了「被動式」、「無壓力」的線上線下購物體驗,「AI可以幫你生成精美的圖片、文案,但如果品牌本身就缺乏靈魂,產出的素材依舊無法打動目標客群。」

黃文榮則提到,科技進步讓全球市場通路日益碎片化,導致傳統大客戶的訂單日益流失,許多OEM、ODM廠商被迫走上跨境電商之路,「所以現今企業的最大挑戰,是『轉變心態』。過去是客戶給規格照著做,現在得自己去面對廣大、多樣的消費者需求。」他建議,企業務必透過AI工具和市場同步,也必須自己培養跨界人才,同時,無論如何都要勇敢搭上數位轉型的列車,並善用亞馬遜全球開店等跨境電商產業資源。

而吳灼輝觀察,跨境電商已從過去的「單點工具」競爭,進化到「系統化AI營運」的時代。他認為,企業不應只把亞馬遜當成單純的銷售通路,更應視為獲取消費者回饋和洞察市場的「大數據中心」,並利用各項AI工具來提升決策效率,才能在激烈的市場競爭中,占據領先地位。

謝孜希總結指出,AI已降低全球化門檻,企業思維應從「品牌全球化」,轉變為營運第一天起就決心打造全球品牌,「不要等在地市場成熟才布局海外,應該善用AI,放大對消費者的理解和決策品質,加速走向世界,讓AI真正成為品牌邁向全球的加速器。」

除了各方專家分享的精實內容,此次博覽會還設置「亞馬遜AI算命館」、各項工具體驗和服務商展示專區,企業、品牌可以體驗亞馬遜全球開店最新的商機探測器、A+內容等AI工具,讓系統解讀自家的「產品命盤」,進而找出潛在商機;今年更增設跨境諮詢專區Seller Cafe,安排了專業的亞馬遜官方專家和跨境顧問,提供未註冊和剛註冊的新手、有廣告投放和行銷等進階問題的老賣家,一對一的實戰指導。

amazon-7.jpg
博覽會本次設置「亞馬遜AI算命館」,協助企業、品牌可以快速找到問題,並體驗亞馬遜全球開店最新的商機探測器、A+內容等AI工具,讓系統解讀自家的「產品命盤」,進而找出潛在商機。由左至右為:亞馬遜全球開店台灣總經理謝孜希、臺北市政府俞振華副秘書長。
圖/ 數位時代

值此AI造浪時代,亞馬遜全球開店博覽會透過趨勢剖析、台灣的成功賣家案例分享,以及各界專家的深度對談,為企業描繪了一張清晰的出海藍圖。台灣品牌只要能緊抓科技研發、價值創新、安全信任等三大優勢,再搭配亞馬遜的AI賦能工具與全球資源,相信能在全球航道上乘風破浪,持續寫下世界級的亮眼佳績。

立即下載_亞馬遜 2026 消費性電子品類攻略手冊|掌握下一波成長動能

圖/ Amazon

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
AI全球100+台灣20
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓