【黑貘來說】 挖掘巨量資料的秘密步驟
【黑貘來說】 挖掘巨量資料的秘密步驟
2013.03.26 | 創業

現在已經有太多的報導說某某公司利用使用者的行為記錄,來算出每一個人的喜好,並且導出商機等等新聞到處可見,但我相信大家看再多次,不是覺得這樣會不會太可怕了?不然就是這好厲害阿!這兩種答案,不然就是兩種都有。

但事實上這件事並不神奇或可怕,會覺得這樣是因為大部份的人不知道怎麼做,或者是說這能夠做甚麼,若是你知道後,發現這跟本只是個套來套去經過計算的結果,甚至在某方面你用手來算都可以,只是不一樣的是人只能處理少量資料,而電腦可以處理巨量資料,當很多事情會有量變產生質變的時候,威力就在此顯現,但這些步驟,說穿了一點都不聰明,甚至還非常的機械化的制式。

當然我不是很好的深入淺出的作者,所以沒辦法寫給大多數的讀者看,而是寫給已經有一點實務經驗的人,尤其是程式設計師或資料庫管理師等工程師,但若沒有這技術背景,我相信做這樣的拆解,可以讓大家從一知半解變成知道個大概,而透過這樣的了解,讓大家有機會去應用是我寫這幾篇的目的。

只是還有一個前提,就是我不會在這邊寫資料探勘的基礎,也就是說,「請先去看本資料探勘的書」,再來看下面幾篇文章吧。

目標:能夠知道某個特定人喜歡甚麼東西,購買每一個商品的機率,或者是說我們該如何推薦商品給他,以及知道他喜歡這商品的原因?

人與商品之間的行為有下面幾種:

  1. 瀏灠
  2. 放入清單
  3. 購買
  4. 評價或評論
  5. 其他

    上面每一種行為都有其數量化的差異,有些是一年幾次,幾十次或到幾百次或更多,而每一個行為都可能有個 「權重 (Weight)」,以及時間 (Time) 與次數 (Times) 的屬性,甚至更有可能是一個 Vector (向量) 的指標,例如喜好、觀感等等,無論是可以量化或不能量化,這些都可以成為建立人與商品的「關連」。

    所有的資料探勘系統實作都是從這些資料做轉化,甚至是簡化,畢竟可以運算,以及算得出結果才是重點,甚至是能夠算給所有消費者顧客使用才是資料探勘的精隨。

    但有趣的事是很多實用的系統都很少是用單一方法去建構出來的,畢竟除了人的行為之外,商品有有幾個屬性:

  6. 商品本質、內容

  7. 商品描述 (meta-data) 與分類
  8. 最後才是商品的使用

    在還沒有 Semantic Web 之前, 我們能用的就是商品的使用,也就是我們使用者/消費者與商品/物品之間的關係,而在有了語意網路之後,我們就可以進一步的處理本質 (文化商品) 與描述了,只是在這之前還要有幾個前置作業。

  9. 會自動化新增關鍵字詞的表

  10. 會自動化連結出語意網路的表

    這兩個表若是可以扣掉前面「會自動化新增/連結」 的話,我相信很多人都有從很多單位去取得這樣的詞庫與關連庫,但在實務上我們有絕大部份的狀況都是在處理運算最新的商品或議題時,沒有一種機制能夠新增或更新的話,幾乎是不實用的。

    只是這新增/更新有時不見得是自動化,因為自動化是件相當困難的事,就我所知有不少在做這項業務的公司單位,用的就是「工人智慧」,而不是人工智慧,但無論如何,有了這兩個表之後,再加上從資料探勘能夠得知的:

  11. 關連分析 (一階, 或高階)

  12. 群落分析 (Clustering)
  13. 時間序列預測

    有了上面三個很基本的工具後,可以配合產出很多的可能性:

  14. 最常見的關連購買

  15. 在搜尋結果中做排序
  16. 從分類結果做語意分析產出因子
  17. 有了高階的關連分析可以透過配對做活動
  18. 從銷售預測中作備品或庫存準備
  19. 只要你想得到的

    當然上面說得很簡單,好像是三兩天就可以開發出來的東西,但事實上單單一個「會自動化連結出語意網路的表」,我記得當時就弄了兩三個月才弄出來,當然現在再弄一次就只須要兩三天到兩三個星期了,畢竟有經驗跟沒有經驗還是差很多的。

    記得我在 5 年多前寫過 Data Mining 是一個須要跟效率挑戰的高度技術的事,但現在的機器已經比 5 年前快 5 倍了,加上資料庫的多樣性,雲端系統的完善,讓寫這樣的系統跟之前簡單不只 5 倍,我在兩個月以前自己從無到有又自己跑一次,以前須要半年的現在只要半個多月就夠了,想想時代還真可怕阿。

    所以說,在這樣成熟的時機而言,導入真正的巨量資料探勘已經不是預算的問題,也不是技術的問題,而是心態的問題了,你準備好了嗎?

轉自[黑貘來說](http://gene.speaking.tw/2013/03/blog-post_20.html)
關鍵字: #大數據
往下滑看下一篇文章
AI 改寫外貿規則!Alibaba.com 用 AI 助台灣中小企業提升跨境獲客力
AI 改寫外貿規則!Alibaba.com 用 AI 助台灣中小企業提升跨境獲客力

過去談外貿競爭力,企業多半聚焦在產品品質、價格優勢與業務能力,但在 AI 新世代,外貿經營模式開始改變,從搜尋供應商、產品比價,到詢價與下單,越來越多流程倚靠 AI 優化與處理,企業若無法善用 AI 工具,接單效率跟市場競爭力都將逐漸落後。

在這樣的趨勢下,全球 B2B 跨境電商平台 Alibaba.com 持續以 AI 強化平台能力,並透過在地團隊與服務體系,協助台灣中小企業提升跨境營運效率與訂單轉換率,同時,每年皆舉辦「跨境電商達人賽」,今年遴選出 10 家台灣代表企業,展示 AI 如何協助企業提升外貿接單能力並拓展海外市場。

例如,深耕五金泵浦領域 40 餘年、積極將產品服務延伸至消防系統與節能設備的偉盛豐貿易,便透過 Alibaba.com 與 AI 生意助手自動回覆海外買家的 RFQ 詢盤,突破時差限制,讓接單流程更加即時,成功將市場拓展至美國、義大利與新加坡等地。

解決客戶痛點,Alibaba.com 以 AI 外貿金三角助台灣企業提升跨境接單力

受到貿易戰與地緣政治影響,全球貿易環境的不確定性大幅提升,過度依賴單一市場已成為潛在風險,越來越多企業透過提供多元產品與布局多元市場確保營運韌性、台灣中小企業也不例外。只不過,受到開發新市場成本高昂、優秀外貿人才逐漸流向半導體與科技產業等因素影響,中小企業面臨諸多挑戰。

為協助企業解決這些痛點,Alibaba.com 台灣總經理廖羿琦表示:「Alibaba.com 不只提供『一站通全球』平台,也透過一系列 AI 與數據工具,幫助台灣賣家更有效率地將產品銷往歐美與東南亞市場,讓 MIT 產品被更多全球買家看見。」

廖羿琦進一步指出,跨境電商從店鋪開設、商品上架、產品描述、回覆買家需求,到成交後的金流與物流,每個環節都影響接單效率,因此,Alibaba.com 提出 AI 外貿金三角策略,協助台灣中小企業系統化提升跨境接單能力:

首先,是透過 Alibaba.com 的一站式外貿平台,連結全球超過 190多個國家和地區、超過5000 萬活躍買家,並提供 AI 工具協助商家提升營運效率。例如,AI 生意助手可協助分析不同市場熱銷商品,提供商品標題與關鍵字建議,甚至生成產品場景圖與影片,提高商品在全球市場的曝光度。

其次,透過 OKKI CRM 協助台灣商家深入理解與客戶的互動關係與需求變化,進而精準地預測客戶需求,挖掘潛在商機。

最後,透過 OKKI AiReach 協助企業從被動接單轉為主動開發客戶。廖羿琦指出:「企業可以透過 AiReach 盤點產業上下游的關聯圖譜與企業關係,讓商家透過更精準的 eDM 與客戶接觸,進一步提升陌生開發的轉換率與成交率。」

值得特別一提的是,除了平台工具,Alibaba.com 也持續強化與企業社群的連結。例如在台灣北、中、南設立六個商圈,透過交流活動讓商家分享跨境經驗與市場洞察,同時也有專職團隊協助企業導入平台與 AI 工具,加速跨境電商的營運成長。

#0 AI 改寫外貿規則!Alibaba.com 用 AI 助台灣中小企業提升跨境獲客力
Alibaba.com 台灣總經理 廖羿琦
圖/ 數位時代

高效佈局,偉盛豐貿易以 Alibaba.com 成功擴展外貿市場

偉盛豐貿易長期深耕泵用閥件與 DC 循環扇市場,隨著第二代接班,公司也開始面臨新的經營課題:疫情衝擊全球供應鏈、台灣內銷市場逐漸飽和,加上通膨、貿易戰與地緣政治等因素,使企業必須重新思考成長動能。

為尋找新的營收來源,偉盛豐貿易王珮馨決定積極布局外貿市場,目標是直接與海外企業客戶建立合作關係,進一步掌握市場需求與訂單結構。

偉盛豐貿易一開始是透過參加國際展會拓展海外市場,但成本高、效益有限。「直到加入 Alibaba.com 後,才真正打開跨境市場。」王珮馨表示,短短一年的時間,偉盛豐貿易與來自美國、義大利與新加坡等六個國家的客戶建立合作關係,甚至在產品單價高於同業約七倍的情況下,仍成功拿下義大利與美國的貨櫃訂單。

背後的關鍵之一,是 Alibaba.com 提供的 AI 生意助手。她表示:「將產品知識庫與技術資料導入 AI 生意助手後,系統便能依照產品規格與應用場景,自動回覆海外買家的 RFQ 詢盤,就算我在休息的時候,AI 仍在替公司接單,而且是用客戶熟悉的語言回覆,等到我隔天上班後再接手處理客戶的進階問題,整體接單效率大幅提升。」

例如,面對美國芝加哥並重視ESG議題的客戶詢問:為何偉盛豐提供的 2.9W DC 循環扇售價高達 156 美元、幾乎是市售產品的七倍,王珮馨的做法是先查詢芝加哥的電價資料,再透過 AI 生意助手生成產品應用場景圖與競品耗電分析表,從「整體持有成本(TCO)」角度說明產品節能優勢,成功說服客戶,取得40呎貨櫃訂單。

王珮馨說:「至於來自義大利的食品加工廠客戶,也是因為 AI 生意助手即時回覆產品規格,了解我們提供的泵浦閥門可在不更動既有設備管線的情況下直接替換使用,因此決定採用該產品並建立長期合作。」對偉盛豐而言,AI 生意助手不只是平台工具,更像是全天候運作的「跨境電商店長」,不僅降低外貿經營門檻,也有益於偉盛豐貿易將隱形冠軍產品推向全球市場。

#0 AI 改寫外貿規則!Alibaba.com 用 AI 助台灣中小企業提升跨境獲客力
偉盛豐貿易 王珮馨
圖/ 數位時代

善用 AI 工具,加樂實業以 Alibaba.com 維運 70% 外貿營收

深耕建築五金市場的加樂實業,也高度肯定 Alibaba.com 在其拓展全球市場過程中的重要角色。加樂實業總經理王拓白表示,公司早在 19 年前便開始使用 Alibaba.com,隨著 Alibaba.com 台灣在地團隊成立,不僅協助加樂實業更有效掌握平台功能,也透過多元課程與培訓活動協助提升跨境電商經營能力,讓公司能以更有效率的方式推動外貿業務,同時將管理工作負擔降低約 50%,員工流動率也減少約 20%。

王拓白指出,加樂實業長期以外貿市場為主要營收來源。過去公司主要透過參加國際展會拓展客戶,一場展覽平均可取得近 70-100 個潛在客戶名單;但在加入 Alibaba.com 後,每月至少能收到超過 350 筆客戶詢問,不僅大幅提升商機來源,也成功培養出年貢獻「億元級」營收的客戶,並將業務版圖拓展至《財富》500 大企業與全球安防領先品牌。

舉例來說,2016 年,加樂實業透過 Alibaba.com 接觸到一名來自澳洲的客戶,最初訂單僅 50 件產品,但在長期合作與信任累積下,訂單量逐年增加,如今已成為公司最大客戶之一,單一客戶一年貢獻營收突破億元。

隨著跨境電商經營的逐漸成熟,加樂實業的外貿結構也出現顯著轉變:過去外貿營收幾乎 100% 來自展會客戶,如今已有高達 70% 的外貿營收來自 Alibaba.com,顯示平台已成為加樂實業拓展全球市場的重要管道。

雙方長期建立的合作默契與信任,也讓加樂實業得以率先導入 Alibaba.com 的 AI 工具並取得實際成效。王拓白以 OKKI CRM 為例說明:「曾有一位合作長達 15 年的客戶訂單突然下滑,我們透過客戶數據分析發現對方開始向其他供應商採購,進一步拜訪後才了解,客戶因為更換經營團隊,產品策略從高階市場轉向平價市場,我們隨即調整產品規格與報價策略,逐步把訂單爭取回來。」

#2 AI 改寫外貿規則!Alibaba.com 用 AI 助台灣中小企業提升跨境獲客力
加樂實業總經理 王拓白
圖/ 數位時代

此外,加樂實業也透過 OKKI AiReach 進行自動化商機開發:只需輸入相關條件,系統便能自動搜尋並篩選潛在客戶名單,在一個月內,挖掘出 748 名潛在客戶並自動發送產品資訊,成功與俄羅斯、美國、杜拜與澳洲等市場的 5 家企業展開合作洽談。

「AiReach 挖掘出的客戶輪廓相當精準,是我們鎖定的進口商與品牌商,因此能大幅提升陌生開發的效率與成交率。」王拓白表示,Alibaba.com 與 AI 工具不僅讓團隊成員可以高效完成跨境電商營運、深入了解市場與客戶動態,更重要的是,可以化被動為主動的布局全球市場,未來將持續深化應用雙方合作與平台工具應用。

偉盛豐貿易跟加樂實業不是特殊案例,Alibaba.com 除持續優化產品服務,更積極協助台灣中小企業跨越全球外貿市場布局門檻,讓其可以更便利且精準的方式提升外貿接單力,創造生態夥伴的共贏。

Alibaba.com

Website: https://seller.alibaba.com/tw

Facebook: https://www.facebook.com/AlibabaTW

Spotify: https://open.spotify.com/show/7IJmBg9V8hjsjxyFPRxmDI?si=66gqnCx2TqiQ91fSWoUqyQ

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
AI全球100+台灣20
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓