Please enable JavaScript.
Coggle requires JavaScript to display documents.
數據分系系統藍圖 (ODS (ETL (Load:排程後匯入 (DW, DM), Transofrm: 資料+商業邏輯 (1…
數據分系系統藍圖
ODS
ETL
Load:排程後匯入
DW
DM
Transofrm: 資料+商業邏輯
1.基於商業邏楫上的需求，必須依照應用程式資料的特性來分類、匯歸
2.把經年累月所聚積的歷史資料來作合併、統計、分折及計算
Extract : 格式的處理
1.資料來自各個不同部門資料格式各異
2.整理成共同的資料格式
3.定義如果都不符合預設處理的格式時，該如何處理
MDM
清洗數據後回寫ODS
寫入DW
個人數據資料清洗? duplicate
Data Integration Hub (DIH)
訂閱
AP2
AP3
AP1
資料傳輸AP1 -> AP3
就是 ETL
EDI(Electronic Data Interchange)
系統與系統間的資料交換
MDM
https://wiki.mbalib.com/zh-tw/%E4%B8%BB%E6%95%B0%E6%8D%AE
ODS的存在發展歷史
數據皆存EDW
整理過的資料
系統需要操作原始資料
結果需要再從EDW還原資料
太過麻煩 想出一中介的存取地點 : ODS
MessageQueue