【專欄】想把數據發揮最大價值?先掌握資料治理關鍵兩大建設、四大制度
【專欄】想把數據發揮最大價值?先掌握資料治理關鍵兩大建設、四大制度

近年機器學習與深度學習模型發展成熟,AI技術與模型建立的環節中,資料佔據著重要的一環,從資料蒐集、儲存、存取、應用都是建構AI智慧應用的重要基礎,為確保企業能夠持續發展與維護各種豐富的AI智慧應用,需要建構資料治理(Data Governance)的相關制度。

什麼是資料治理?依據資料治理研究院 (The Data Governance Institute)的定義是「資訊相關流程的決策權利與責任系統,依大家同意的模型執行,這個模型描述在遇到何種情況下,透過何種方法,對哪些資訊採取何種行動」,簡單講資料治理是指對資料的取得、處理、品質、運用的一套管理方法,這包含著策略、角色與權限,其目的是要讓資料在組織內發揮最大價值, 讓企業獲取最高效益。

資料蒐集關鍵任務:「完整」跟「避免偏差」!

現在資料蒐集觀念與過往不一樣,過往企業蒐集的資料大都以結構化資料為主,先定義蒐集資料的結構與內涵,然後存入資料庫(Database)或資料倉儲(Data Warehouse)中,累積大量資料,在需要時取出使用。現在有了AI的助攻,除了具備處理大量資料的能力外,對於非結構化資料的處理能力也大增,非結構化資料的處理與挖掘也成為企業競爭力的重要來源。

企業將內部或外部的各種結構化、非結構化資料建立資料湖(Data Lake)來儲存,資料湖的建立觀念是先將各種原始資料儲存起來,需要時可以從中取出應用,這樣可以讓資料更勝過往地被應用。

企業資料從蒐集、清洗、儲存、處理、存取、應用是企業的重要任務,資料蒐集越廣、越完整、越需要有一套不同於過往的做法,這正是企業需要建立資料治理的制度與觀念。

資料品質也是很重要的一環,資料蒐集應避免偏差或缺失,在整理資料時,就應盡量確保不會造成不公平或嚴重偏差,避免建立的模型即便在測試上有很高的準確率,實務上卻無法使用的困境。

例如蒐集多種類的訓練資料,每個種類的數量比例差距很大,就會有資料數量不平衡(Imbalance)的問題,這就會造成分類上的偏差;或是影像資料其拍攝的方式或拍攝儀器和實際場域上使用的不同,也會造成辨識上的偏差;更別提,如果一開始在進行資料標註程序時,就有標註錯誤的情形,那訓練出來的模型,更無法給予令人信服的結果。相較於過往的資訊系統,在AI智慧應用系統中更需要注意這些細節。

過往自動化的資訊系統實現的方法是靠邏輯與規則,因此每個由系統計算出的結果,都可以透過邏輯判斷與驗算回推找出錯誤的原因,反之在AI智慧應用系統中,AI模型的運作,我們較難清楚知道模型判斷結果的依據或理由,為避免資料的偏差會造成不公平甚至影響倫理問題,需建構可信任AI的系統或是產品,因此我們需要針對資料和數據進行管理與規範。

二大建設、四大制度,建構企業數位資料治理藍圖

資料治理觀念漸漸被企業重視,但是怎樣建構一套適合企業的資料治理制度與方法也成為命題。企業數位資料治理藍圖提出一套建構方法,透過二建設四制度來涵蓋整套制度,為企業提供一套制度建立的步驟。

兩大建設

1.資料基礎建設
不同企業對於資料的管理制度及規範,會依數據的著重點不同,建立不同重心及不同嚴謹度的資料治理制度,如對於敏感資料的管理、重要資料的規範、一般資料的處理,有不同力度管理方式;而建立資料治理制度後,依照制度進行資料的蒐集、儲存及初步處理,以能支持未來的應用需求,透過資料處理制度來建立資料湖及資料的初步整理。

2.資料應用建設
資料是提供應用的主要要素,重點是需要能夠被各種應用有效率地存取與使用,資料存取制度建立資料安全、網路安全、存取安全及能被快速存取;資料應用制度來發展企業需要的各式資訊自動化系統及智慧化系統。

資料治理
企業數位資料治理藍圖
圖/ 張榮貴提供

四大制度

整個企業數位資料治理藍圖可以從資料治理、資料處理、資料存取、資料應用四大制度來建構。每個制度都從企業應用發展的需求來調整,運用DevOp(Development and Operation)觀念來運作,整個藍圖中的四大制度又形成一個更完整的DevOps循環,如此構成一個持續改善的循環,不斷演進發展。

DevOps於2009年被提出後,成為業界開發(Development, Dev)與維運(Operation,Ops)整合的新思維,本藍圖也借用這精神,在制度的發展過程也考慮實務應用的回饋,而適時地調整制度,成為一種不斷自我優化的流程改善循環。接下來說明這四大制度的內涵:

1.資料治理制度:管理策略怎麼建立?
建立資料的基礎建設,首先就需要資料治理上的規範與方法,就是要建立數位資料治理制度,將其成為企業資料治理的依據。這裡也要強調一下資料治理與資料管理的範疇不一樣,資料管理談的是資料的管理方法實施,來達成管理目的;資料治理有更高的管理層級,制定各種策略,指導資料管理的活動,資料的蒐集、處理、應用、品質相關的規範與方法及作業的角色與權限,這些策略指導、監督、評估資料管理的進行。例如何人、何時、可以做何事的規範;資料品質的確保條件…等。
制度的建立運用PDCA ( Plan-Do- Check-Act )精神做管理循環。先是依照企業營運目標來建立適合制度,然後執行,在實際場域進行績效評估,針對不足之處持續改善。企業建立過程可以參考現有的資料治理制度,例如2021年7月資策會科技法律研究所出版「重要數位資料治理暨管理制度規範」(EDGS, Essential Data Governance and Management System),提供作資料治理時需要的五個階段,包含需求蒐集、目標訂定、目標執行、目標達成以及持續改善,是一個很完整的制度導入參考規範;國際標準組織2015年也提出ISO 38505-1提出資料治理的目標、原則與模型;也有研究者提出資料治理架構,這些都是企業可以參考。

2.資料處理制度:龐大資料怎麼整理?
資料處理制度可以從兩個角度來規劃與執行,就是「資料準備」和「資料情境化」。資料準備指的就是建立企業的資料湖,廣泛收集企業營運所需的內部資料及外部資料,可以保留原始資料,也可能保存尚未明確運用的資料。
內部資料如交易資料、服務資料、作業紀錄、物聯網資料、互動資料…等。外部資料如輿情資料、環境資料、客戶或消費者網路行為資料、顧客社群媒體溝通資料…等。這些資料可能是有格式的結構化資料、或沒有格式的非結構化資料、或也可能是部分有結構混合部分無結構的資料。

資料情境化指的是建構資料的使用情境,一般資料湖的收集的資料不一定要有特定目的,但公司經營有其目標,所以提出資料情境化概念,有些資料可以依據營運目標預先設定可能被使用的情境,來預先梳理資料,建立中介資料(Meta Data)並整理資料間之關係,這可以於資料蒐集時就加以預先處理,以供未來使用。

例如建立推薦系統模型時,會需要建構客戶喜好度資訊,那我們就可以來思考,現在已經蒐集到或是未來系統應用上可以取得的資料有哪些跟喜好度有關,這其中又可以串接那些資料來連結喜好度,這就是建立資料的使用情境。資料情境化便是對資料做基礎處理依據,包含進行資料清洗、資料儲存、資料前處理、中介資料、資料管理,以完成資料準備,更有利於未來企業之使用。

3.資料存取制度:怎麼存才安全可靠?

在資料存取制度的主要兩個核心是「資料安全」及「資料存取速度」。企業將資料收集並整理過後,透過儲存安全、網路安全、存取安全的制度與作業來確保資料安全,而資料之目的是為了能夠被各式企業應用所使用,資料能夠於使用的各種情境快速且安全被存取,也成為制度設計之重要因素,這可以透過Gartner提出的資料編織(Data Fabric)、增強隱私運算及網路安全網來建構,達到資料能安全地被管理與快速地被應用,以發揮資料價值。

4.資料應用制度:如何真正派上用場?

資料要能被實際運用才能產生效果,而資料運用被展現成各種企業應用,為企業或組織所運用。資料應用制度主要是企業應用的開發管理制度,包含「軟體工程」及「人工智慧工程」。

軟體工程已發展多年,企業在開發軟體產品或服務時使用「軟體生命週期管理」來實現企業面向內部的企業資源規劃( ERP, Enterprise Resource Planning )及面向外部的顧客關係管理( CRM, Customer Relationship Management )系統。

人工智慧工程近兩年開始被重視,因為企業具有越來越多的AI智慧應用與服務,為讓AI更能落地與接軌,透過AI工程的「AI模型生命週期管理」來協助企業更容易管理與運用AI智慧應用,也能保有持續發展之能力。

整個企業數位資料治理藍圖,是藉由DevOps的概念貫穿。透過實際資料運用的經驗,可以發掘管理的不足之處,再進行制度上的調整,調整資料治理規範,修改資料處理的方式,加強資料存取的安全,最後再回到實際的應用跟開發,透過不斷的循環,持續改善以達到企業營運的目標。

數位經濟時代,數據是企業驅動成長的重要動力,企業數位資料治理藍圖是企業數據能夠發揮最大價值的藍圖,企業依據經營目標來建構治理制度,成為企業不斷成長的驅動力量。

《數位時代》長期徵稿,針對時事科技議題,需要您的獨特觀點,歡迎各類專人士來稿一起交流。投稿請寄edit@bnext.com.tw,文長至少800字,請附上個人100字內簡介,文章若採用將經編輯潤飾,如需改標會與您討論。

(觀點文章呈現多元意見,不代表《數位時代》的立場)

責任編輯:隋昱嬋、侯品如

關鍵字: #大數據 #AI
往下滑看下一篇文章
從第一天就走向全球!MOOIMOM、大研生醫、特力集團借力亞馬遜出海,以創新、信任打造品牌護城河
從第一天就走向全球!MOOIMOM、大研生醫、特力集團借力亞馬遜出海,以創新、信任打造品牌護城河

在全球「消費升級」的時代,現今消費者要找的,不是最便宜、CP 值最高的產品,而是更安全、更值得信任、更符合需求的商品。在此趨勢下,台灣品牌的優勢反而被放大。

事實上,憑藉著深厚的製造底蘊、對品質的堅持,許多來自台灣的品牌,正透過精準的「價值創新」研發,以及「安全信任」的品牌經營,在亞馬遜上,擄獲各國消費者的青睞。

拒絕等待完美,MOOIMOM 透過出海、迭代快速進化

新創母嬰品牌 MOOIMOM 自 2016 年創立起,便瞄準全球市場,MOOIMOM 創辦人周靖棠指出,近年來,台灣新生兒人數持續下滑,若一開始就只做台灣市場,花去的時間、開發成本都無法撐起未來的成長性,「所以我們第一天就決定『Go Gloabl』,這對新創非常重要。」

AWS-2.png
新創品牌MOOIMOM瞄準母嬰市場,有鑒於台灣新生人口持續負成長,從2016年創立的第一天,創辦人周靖棠就決定Go Gloabl,決心用優質產品,挑戰更大的市場。
圖/ MOOIMOM

MOOIMOM 是從印尼市場起家,再逐步拓展回台灣,但周靖棠隨即又意識到,若「Go Global」僅在東南亞、台灣,仍然有侷限,於是 MOOIMOM 決定加入亞馬遜,跨出亞洲、進軍澳洲等市場,「MOOIMOM 需要一個已經有高信賴度、強大物流、精準數據的夥伴,協助我們降低跨足北美、澳洲等市場的門檻。」

AWS-3
MOOIMOM創辦人周靖棠、共同創辦人李沆澎及團隊,透過運用亞馬遜數據與工具,以最真實的消費者反饋,反覆打磨產品。
圖/ MOOIMOM

為了找到市場缺口、實踐價值創新,MOOIMOM 積極運用亞馬遜上的數據與賣家工具。相較於其他品牌可能會注意自家產品有多少五顆星的評價,周靖棠尤其重視「四顆星」的留言,「因為那往往是能不能從『好』做到『更好』的關鍵。」以 MOOIMOM 的「涼感產後束腹帶」為例,團隊透過評論,發現邊緣縫線會造成皮膚的些微摩擦,加上產婦穿不住悶熱的材質,於是,MOOIMOM 花了近兩年時間,參考亞馬遜後台數據,包括消費者留言、競品的包裝顏色、排名落差等資訊,將產品從 1.0 迭代至 3.0 版本,不僅改採涼感透氣材質,更做到無縫線的舒適感。周靖棠透露,1.0 版的束腹帶,原先一週賣不到 1000 美元,但發展至 3.0 時,除了評價穩定保持在 4.3 顆星以上,一週甚至可以達到1萬美元的營業額,等於成長十倍。

AWS-4.png
圖/ MOOIMOM
AWS-5.png
產後束腹帶三代迭代圖,不僅涼感透氣,更做到無縫線的舒適體驗,讓產後媽媽可以穿得住,真正達到束腹的效果。
圖/ MOOIMOM

另外,周靖棠也善用亞馬遜的「A+ Content」等工具,將「永續」元素植入 MOOIMOM。由於澳洲對環保、安全規範的要求,向來以嚴格聞名,對於跨境電商無法「觸摸實品」的鴻溝,團隊便運用 A+ Content,在產品頁面中將小麥桿融合PP材質等無毒認證和安全細節,讓消費者一目瞭然。針對各國嚴格的母嬰用品法規,團隊也在亞馬遜協助下,一一完成合規程序,把出海阻礙轉化為讓消費者安心買單的保證。

科學實證敲開日本大門,大研生醫靠極致細節贏得信任

以德國頂級魚油、視易適葉黃素等產品聞名的大研生醫,起初是為了自己和家人的保健需求創立,在台灣取得佳績後,大研決定將這份堅持帶向世界。而出海的首站,是保健食品發展逾百年、相當競爭的日本市場。

AWS-6.jpg
大研生醫出海首站就挑戰保健食品發展逾百年、相當競爭的日本市場,大研生醫董事長林東慶表示,進入日本市場真的很辛苦,但當收到日本消費者正向的回饋時,對團隊帶來很大的鼓舞。
圖/ 數位時代

大研生醫董事長林東慶解釋,先選擇日本,是因為當地消費者偏好網購、多居住於公寓,購物習慣、商業環境和台灣相近。至於決定透過亞馬遜進軍日本,一方面出於亞馬遜是日本使用率最高的電商網站之一。其次,在日本市場想「從 0 到 1」發展不易,溝通成本高,「但亞馬遜上的消費者,都很願意接受新東西。代表我們更容易在上面找到對的人。」

林東慶特別提到,日本保健食品市場歷史悠久,卻並非完全沒有切入機會。例如:日本延續過往經驗,原料進展未必跟上時代需求,市面的魚油濃度普遍都不足。除了端出創新的產品之外,想進入相對成熟的日本保健品市場,安全有效、建立信任是唯一真理,「大研經營的正是『信任』,信任背後代表了你的產品、服務和品牌。而亞馬遜就是過程中的最強後盾。」

大研透過亞馬遜的後台數據,從消費習慣與市場需求兩個面向,深入了解日本市場。例如,日本消費者偏好小顆粒、一天可服用多顆保健品;另一方面,日本社會因工作壓力大,助眠、舒緩情緒等產品需求也持續成長。團隊再搭配「在地製造、世界原料」的策略,讓「Made in Japan」成為敲門磚,「就和在台灣帶起『高濃度魚油』的風潮一樣,我們以國際頂級專利原料、強大的科學實證及嚴格的產品檢驗,帶起新趨勢。」

大研甚至將細節延伸至包裝、服務。比方說,日本家戶的信箱尺寸偏小,大研的包裝設計,便要確保能順利投遞進信箱;消費者認為用紙盒包裝更安全,大研也從善如流,採精緻紙盒而非美國市場的簡約瓶裝。由於在每個環節都做到極致,大研才進軍日本亞馬遜半年,就奪下 Omega-3 魚油類目排名第一,整體 BSR 也達到 1000 至 1200 名以內。

接下來,大研計劃進軍極度重視天然與健康的澳洲市場,以及競爭激烈的美國市場,林東慶強調,大研期望透過亞馬遜,將對品質的堅持帶出台灣,成為具影響力的全球品牌。

AWS-7.jpg
大研生醫因應不同市場消費習慣,推出日本、美國、台灣三種版本魚油產品,同樣訴求高濃度、高品質。不僅在生產上呼應其「在地製造、世界原料」的全球化策略,更配合當地市場習慣,量身定做外包裝規劃,左:日本版、中:美國版、右:台灣版德國頂級魚油)
圖/ 數位時代

跳脫傳統代工宿命,特力集團用數據算出市場需求

擁有 30 年歷史的特力集團,從傳統 B2B 貿易起家,如今再下一城、攻入跨境電商市場,在亞馬遜上的營收,每月穩定達到美元六位數。這背後,是一場為了解決傳統代工痛點發起的 DNA 轉型。

特力集團業務總監 Isaac Liao 指出,傳統 B2B 貿易是特力深厚且穩固的根基,但為了在全球供應鏈重組的變局中更具敏捷度,特力必須打破過去與終端市場之間的隔紗。但中上游企業打下游 B2C 戰局,最怕盲目下注或因為怕虧損而不敢試錯。特力的心法,是建立一個「基於數據的科學容錯機制」,把亞馬遜當成全球導航儀,大膽做小規模的市場實驗,算準了、看清了再重注出擊。

AWS-8
特力集團業務總監 Isaac Liao(左三)分享:特力發揮多軌營運優勢,結合在地團隊實體佈局與供應鏈韌性,打造品牌護城河。
圖/ 特力集團

Isaac 透露,特力在歐美家居市場突圍的關鍵,在於用「數據」找出消費者的痛點,再據此創新產品,「中上游企業常覺得自家產品無敵,怎麼會賣不好?但在電商戰場,消費者沒搜那個關鍵字,產品再好都等於不存在。」特力是用亞馬遜的商機探測器、品牌分析工具,抓出高需求、低競爭的藍海市場,並將自家產品、競品的負評,作為研發參考。例如團隊抽絲剝繭後,發現消費者通常在購買資源回收桶時,最痛恨「異味洩漏」和「腳踏板易壞」;買烤肉推車時,則有「說明書看不懂」、「組裝太複雜」等痛點。團隊會再據此回頭改良製程、產品,並將行銷時,將這些痛點的「解方」直接放大在亞馬遜的產品頁面 A+ Content 和主圖影片中。

AWS-9
結合質感美學與實用功能,特力熱銷居家產品主打極窄隙縫省空間設計(左)與質感靜音緩降上蓋(右),精準切中消費者痛點。
圖/ 特力集團

Isaac 特別提到,近期特力導入了亞馬遜行銷雲(Amazon Marketing Cloud, AMC),拆解完整的消費旅程。以特力在亞馬遜熱銷的烤肉推車為例,透過 AMC 的底層數據藍圖,團隊發現歐洲消費者從心動到行動平均需要三週。消費者可能在第一週看球賽時,先被特力的品牌影片廣告(DSP)吸引;第二週滑亞馬遜時,看到展示型廣告(SD)被再次提醒;直到第三週週末要辦派對了,才在搜尋框輸入關鍵字並透過商品廣告(SP)下單結帳,「AMC 讓我們看清這條跨渠道的『消費旅程藍圖』,把過去盲目砸廣告的焦慮,變成每分錢都能精算回報率的高精準 ROI 投資。」

特力已立下月營收達七位數美元的新目標。Isaac 透露,團隊正積極布局生成式引擎優化(GEO)等最新 AI 搜尋趨勢,並根據亞馬遜的後台數據,延伸家居周邊產品線,期望推動內部從「製造思維」進化為「市場和品牌思維」,讓台灣深厚的製造底蘊,能在國際零售舞台上走得更深、更遠。

在迎戰「消費升級」的此刻,台灣企業從來不缺好技術,缺的是直面終端市場的勇氣與機會。而亞馬遜提供的,不只是一套銷售工具,而是一套完整的「持續創新」能力——從全球物流、在地合規,到消費者洞察與數據分析,讓品牌得以直接理解世界各地消費者的真實需求。透過這套基礎設施,品牌能在國際市場中「快速測試、快速修正、快速成長」,把每一次迭代都變成站穩腳步的養分。台灣品牌只要願意邁出第一步,再借力亞馬遜的全球能力,勢必能在世界舞台走得更穩、更遠,實踐「Go Global From Day One」的布局。

想要挑戰跨境,讓更多人認識你的產品嗎?
立即報名 Taiwan Select Day

圖/ Amazon

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
代理式商務連動百兆商機
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓