【專欄】想把數據發揮最大價值?先掌握資料治理關鍵兩大建設、四大制度
【專欄】想把數據發揮最大價值?先掌握資料治理關鍵兩大建設、四大制度

近年機器學習與深度學習模型發展成熟,AI技術與模型建立的環節中,資料佔據著重要的一環,從資料蒐集、儲存、存取、應用都是建構AI智慧應用的重要基礎,為確保企業能夠持續發展與維護各種豐富的AI智慧應用,需要建構資料治理(Data Governance)的相關制度。

什麼是資料治理?依據資料治理研究院 (The Data Governance Institute)的定義是「資訊相關流程的決策權利與責任系統,依大家同意的模型執行,這個模型描述在遇到何種情況下,透過何種方法,對哪些資訊採取何種行動」,簡單講資料治理是指對資料的取得、處理、品質、運用的一套管理方法,這包含著策略、角色與權限,其目的是要讓資料在組織內發揮最大價值, 讓企業獲取最高效益。

資料蒐集關鍵任務:「完整」跟「避免偏差」!

現在資料蒐集觀念與過往不一樣,過往企業蒐集的資料大都以結構化資料為主,先定義蒐集資料的結構與內涵,然後存入資料庫(Database)或資料倉儲(Data Warehouse)中,累積大量資料,在需要時取出使用。現在有了AI的助攻,除了具備處理大量資料的能力外,對於非結構化資料的處理能力也大增,非結構化資料的處理與挖掘也成為企業競爭力的重要來源。

企業將內部或外部的各種結構化、非結構化資料建立資料湖(Data Lake)來儲存,資料湖的建立觀念是先將各種原始資料儲存起來,需要時可以從中取出應用,這樣可以讓資料更勝過往地被應用。

企業資料從蒐集、清洗、儲存、處理、存取、應用是企業的重要任務,資料蒐集越廣、越完整、越需要有一套不同於過往的做法,這正是企業需要建立資料治理的制度與觀念。

資料品質也是很重要的一環,資料蒐集應避免偏差或缺失,在整理資料時,就應盡量確保不會造成不公平或嚴重偏差,避免建立的模型即便在測試上有很高的準確率,實務上卻無法使用的困境。

例如蒐集多種類的訓練資料,每個種類的數量比例差距很大,就會有資料數量不平衡(Imbalance)的問題,這就會造成分類上的偏差;或是影像資料其拍攝的方式或拍攝儀器和實際場域上使用的不同,也會造成辨識上的偏差;更別提,如果一開始在進行資料標註程序時,就有標註錯誤的情形,那訓練出來的模型,更無法給予令人信服的結果。相較於過往的資訊系統,在AI智慧應用系統中更需要注意這些細節。

過往自動化的資訊系統實現的方法是靠邏輯與規則,因此每個由系統計算出的結果,都可以透過邏輯判斷與驗算回推找出錯誤的原因,反之在AI智慧應用系統中,AI模型的運作,我們較難清楚知道模型判斷結果的依據或理由,為避免資料的偏差會造成不公平甚至影響倫理問題,需建構可信任AI的系統或是產品,因此我們需要針對資料和數據進行管理與規範。

二大建設、四大制度,建構企業數位資料治理藍圖

資料治理觀念漸漸被企業重視,但是怎樣建構一套適合企業的資料治理制度與方法也成為命題。企業數位資料治理藍圖提出一套建構方法,透過二建設四制度來涵蓋整套制度,為企業提供一套制度建立的步驟。

兩大建設

1.資料基礎建設
不同企業對於資料的管理制度及規範,會依數據的著重點不同,建立不同重心及不同嚴謹度的資料治理制度,如對於敏感資料的管理、重要資料的規範、一般資料的處理,有不同力度管理方式;而建立資料治理制度後,依照制度進行資料的蒐集、儲存及初步處理,以能支持未來的應用需求,透過資料處理制度來建立資料湖及資料的初步整理。

2.資料應用建設
資料是提供應用的主要要素,重點是需要能夠被各種應用有效率地存取與使用,資料存取制度建立資料安全、網路安全、存取安全及能被快速存取;資料應用制度來發展企業需要的各式資訊自動化系統及智慧化系統。

資料治理
企業數位資料治理藍圖
圖/ 張榮貴提供

四大制度

整個企業數位資料治理藍圖可以從資料治理、資料處理、資料存取、資料應用四大制度來建構。每個制度都從企業應用發展的需求來調整,運用DevOp(Development and Operation)觀念來運作,整個藍圖中的四大制度又形成一個更完整的DevOps循環,如此構成一個持續改善的循環,不斷演進發展。

DevOps於2009年被提出後,成為業界開發(Development, Dev)與維運(Operation,Ops)整合的新思維,本藍圖也借用這精神,在制度的發展過程也考慮實務應用的回饋,而適時地調整制度,成為一種不斷自我優化的流程改善循環。接下來說明這四大制度的內涵:

1.資料治理制度:管理策略怎麼建立?
建立資料的基礎建設,首先就需要資料治理上的規範與方法,就是要建立數位資料治理制度,將其成為企業資料治理的依據。這裡也要強調一下資料治理與資料管理的範疇不一樣,資料管理談的是資料的管理方法實施,來達成管理目的;資料治理有更高的管理層級,制定各種策略,指導資料管理的活動,資料的蒐集、處理、應用、品質相關的規範與方法及作業的角色與權限,這些策略指導、監督、評估資料管理的進行。例如何人、何時、可以做何事的規範;資料品質的確保條件…等。
制度的建立運用PDCA ( Plan-Do- Check-Act )精神做管理循環。先是依照企業營運目標來建立適合制度,然後執行,在實際場域進行績效評估,針對不足之處持續改善。企業建立過程可以參考現有的資料治理制度,例如2021年7月資策會科技法律研究所出版「重要數位資料治理暨管理制度規範」(EDGS, Essential Data Governance and Management System),提供作資料治理時需要的五個階段,包含需求蒐集、目標訂定、目標執行、目標達成以及持續改善,是一個很完整的制度導入參考規範;國際標準組織2015年也提出ISO 38505-1提出資料治理的目標、原則與模型;也有研究者提出資料治理架構,這些都是企業可以參考。

2.資料處理制度:龐大資料怎麼整理?
資料處理制度可以從兩個角度來規劃與執行,就是「資料準備」和「資料情境化」。資料準備指的就是建立企業的資料湖,廣泛收集企業營運所需的內部資料及外部資料,可以保留原始資料,也可能保存尚未明確運用的資料。
內部資料如交易資料、服務資料、作業紀錄、物聯網資料、互動資料…等。外部資料如輿情資料、環境資料、客戶或消費者網路行為資料、顧客社群媒體溝通資料…等。這些資料可能是有格式的結構化資料、或沒有格式的非結構化資料、或也可能是部分有結構混合部分無結構的資料。

資料情境化指的是建構資料的使用情境,一般資料湖的收集的資料不一定要有特定目的,但公司經營有其目標,所以提出資料情境化概念,有些資料可以依據營運目標預先設定可能被使用的情境,來預先梳理資料,建立中介資料(Meta Data)並整理資料間之關係,這可以於資料蒐集時就加以預先處理,以供未來使用。

例如建立推薦系統模型時,會需要建構客戶喜好度資訊,那我們就可以來思考,現在已經蒐集到或是未來系統應用上可以取得的資料有哪些跟喜好度有關,這其中又可以串接那些資料來連結喜好度,這就是建立資料的使用情境。資料情境化便是對資料做基礎處理依據,包含進行資料清洗、資料儲存、資料前處理、中介資料、資料管理,以完成資料準備,更有利於未來企業之使用。

3.資料存取制度:怎麼存才安全可靠?

在資料存取制度的主要兩個核心是「資料安全」及「資料存取速度」。企業將資料收集並整理過後,透過儲存安全、網路安全、存取安全的制度與作業來確保資料安全,而資料之目的是為了能夠被各式企業應用所使用,資料能夠於使用的各種情境快速且安全被存取,也成為制度設計之重要因素,這可以透過Gartner提出的資料編織(Data Fabric)、增強隱私運算及網路安全網來建構,達到資料能安全地被管理與快速地被應用,以發揮資料價值。

4.資料應用制度:如何真正派上用場?

資料要能被實際運用才能產生效果,而資料運用被展現成各種企業應用,為企業或組織所運用。資料應用制度主要是企業應用的開發管理制度,包含「軟體工程」及「人工智慧工程」。

軟體工程已發展多年,企業在開發軟體產品或服務時使用「軟體生命週期管理」來實現企業面向內部的企業資源規劃( ERP, Enterprise Resource Planning )及面向外部的顧客關係管理( CRM, Customer Relationship Management )系統。

人工智慧工程近兩年開始被重視,因為企業具有越來越多的AI智慧應用與服務,為讓AI更能落地與接軌,透過AI工程的「AI模型生命週期管理」來協助企業更容易管理與運用AI智慧應用,也能保有持續發展之能力。

整個企業數位資料治理藍圖,是藉由DevOps的概念貫穿。透過實際資料運用的經驗,可以發掘管理的不足之處,再進行制度上的調整,調整資料治理規範,修改資料處理的方式,加強資料存取的安全,最後再回到實際的應用跟開發,透過不斷的循環,持續改善以達到企業營運的目標。

數位經濟時代,數據是企業驅動成長的重要動力,企業數位資料治理藍圖是企業數據能夠發揮最大價值的藍圖,企業依據經營目標來建構治理制度,成為企業不斷成長的驅動力量。

《數位時代》長期徵稿,針對時事科技議題,需要您的獨特觀點,歡迎各類專人士來稿一起交流。投稿請寄edit@bnext.com.tw,文長至少800字,請附上個人100字內簡介,文章若採用將經編輯潤飾,如需改標會與您討論。

(觀點文章呈現多元意見,不代表《數位時代》的立場)

責任編輯:隋昱嬋、侯品如

關鍵字: #大數據 #AI
往下滑看下一篇文章
資安齊發!合勤集團三品牌同台,展現整合防禦實力
資安齊發!合勤集團三品牌同台,展現整合防禦實力

資安已成企業營運的基本保障,合勤集團整合旗下兆勤科技、黑貓資訊與勤晁科技,打造從基礎設施到智慧防護的完整資安體系,助企業穩健邁向AI新時代。

隨著企業加速推動數位轉型、駭客持續進化攻擊手法,資安早已不是可有可無的保險,而是企業日常營運的「剛性需求」。看準資安市場商機,合勤集團(Zyxel Group)近年來積極透過旗下3家子公司—兆勤科技、黑貓資訊與勤晁科技佈局資安防線。在日前登場的CYBERSEC 2025台灣資安大會上,更以「資安特勤,偕同出擊」為主題,展示一個涵蓋AI 驅動的雲地整合防禦、智慧資安維運服務到高規格跨域網路安全與加解密的完整防禦體系,不僅吸引大批與會者駐足,成為展場人氣最旺的攤位之一,更充分展現合勤集團在資安領域的強勁實力與市場吸引力。

兆勤科技祭出雙軌策略,助攻中小企業資安升級

根據統計,2024年的目標式勒索資安事件,高達90%是以中小企業為攻擊目標,顯見,資安防護不再是大型企業才需要關注的課題,中小企業的資安需求同樣迫切且不容忽視。

「然而,中小企業因為缺乏資安專業人才及預算有限,不易做好資安管理,再加上近年來網路攻擊手法多變且複雜,更加深應對威脅的難度,」兆勤科技總經理蔡明見一語道出中小企業的資安挑戰。為此,兆勤科技祭出「簡化管理、強化服務能量」的雙軌策略,持續精進雲端網路安全解決方案,讓中小企業能夠以最少資源完成資安佈署工作。

在簡化管理上,兆勤科技以Nebula雲端管理平台為核心,透過以下3大機制,達到簡化管理負擔的目標。首先,在Nebula平台導入雲地共融技術,讓雲地兩端的安全策略及網路設定可以同步,突破傳統網路設備管理模式只能本地或雲端二選一的限制,也為企業網路管理提供更多彈性,企業可以先採用本地管理,待習慣雲端操作時,再一鍵轉移到雲端,無需重新配置、也不需更換設備,大幅降低轉型門檻,打造跨平台的一致性防護。

合勤科技
兆勤科技總經理蔡明見
圖/ 數位時代

其次,Nebula平台除了可以集中管理防火牆、交換器、無線AP等各個網路設備,設定介面亦相當簡單好操作,透過各種方式例如:事先預設基礎設定、掃描條碼即可將設備加入網路等,讓使用者即便不是專業IT人員,可以輕鬆完成設定、掌握整體網路狀態,大幅降低學習門檻與提高管理效率。

第三、Nebula平台可以自動接收韌體更新與漏洞修補程式,避免因人力不足而忽略系統維護與更新的風險。

在強化服務能量上,兆勤科技積極輔導經銷或通路夥伴建立服務能量,滿足中小企業對網路代管服務的需求。「這是能為中小企業、夥伴與兆勤創造3贏的做法,」蔡明見說明,藉由Nebula平台可以遠端管理的特性,使經銷或通路夥伴能夠一次管理上百個客戶的網路設備,並以訂閱制收取服務費用,成功由傳統硬體銷售轉型為網路代管服務提供者,同時也讓中小企業得以使用網路代管服務,近來,兆勤更推出pay-as-you-go金流方案,協助夥伴降低資金壓力,加速拓展服務市場。

黑貓資訊破除IT與資安斷層,強化內部防禦

合勤集團旗下專注於資安顧問及託管服務的黑貓資訊,自2017年由合勤投控公司資安部門分拆出來後,便聚焦在解決企業 IT 與資安協同作業的挑戰。「企業內網管理的盲點有很多,但IT與資安的協作斷層,是目前最常見也最迫切要解決的問題,」黑貓資訊總經理游政卿說。

IT與資安雖然密不可分,但實務上,企業通常將IT與資安劃分成2個團隊,且彼此的工作重點也不相同,IT 團隊專注資源調度、確保系統穩定與效能,資安團隊則忙於應對警報和威脅,這種分工模式不只讓攻擊者有機可乘,更會令IT團隊誤以為資安只會加重工作負擔。

合勤科技
黑貓資訊總經理游政卿
圖/ 數位時代

「資安的價值,應該從協助IT部門解決問題開始,而不是增加負擔。」游政卿強調,因此,資安團隊首先要做的就是「與IT同在」,從理解IT團隊的需求、解決痛點到取得信任,雙方才能進一步協作,共同應對日益複雜的網路威脅。

以IT資產盤點為例,這是IT團隊相當重要又很耗時費力的工作,而資安團隊可以透過端點安全解決方案(EDR)進行資產盤點,先協助IT團隊掌握所有終端設備的型號、使用狀況與更新需求,再延伸到端點安全防護議題,如此不僅減輕IT負擔,也讓資安建置更具體有感。

除了IT與資安的協作斷層外,包括資產與風險能見度不足、過度依賴邊界防禦,忽略內部橫向移動的風險、以傳統基於特徵碼的靜態防禦機制為主,無法有效應對快速變化的動態威脅、對於第三方軟硬體與的安全把關不足等,亦是企業內網管理常見的盲點。

對此,黑貓資訊憑藉深厚技術底蘊,自主研發多元資安解決方案與服務。在解決方案端,推出在如同樂隊指揮家的智慧XDR防護平台,可協調整合多源資安日誌,並結合AI技術大幅提昇威脅偵測的精準度,亦有可部署於地端(On-premise)的SIEM 解決方案,滿足企業對資料落地、合規與客製化的需求。在服務端,不僅提供24 X7全年無休的MDR/SIEM/SOC 託管式監控服務,更同步提供滲透測試、弱點掃描、供應鏈風險檢測等服務。

值得一提的是,黑貓資訊目前正積極申請ISO 17025資通安全檢測實驗室認證,導入NIST SP 800-115測試流程,協助企業確保所導入的資安方案具備可驗證性與國際標準接軌能力。

在數位轉型成為企業生存關鍵的當下,資安已成為業務穩定與品牌信任的保證。合勤集團透過兆勤科技的雲地整合資安服務、黑貓資訊的智慧防護與專業服務,以及勤晁科技的高規安全方案「偕同出擊」,建構出一條完整而具彈性的資安防線,讓不同需求的客戶都能享有最合適與全面的資安保障,更有信心邁向AI新時代。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
AI全球100+台灣50
© 2025 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓