|
|

跨出數據工程轉型第一步 –
淺談 ETL 平台汰換與遷移之實施方法論與步驟

Trinity 數據整合研究室
隨著 ETL 工具軟體於上世紀 90 年代面市,國內企業也逐漸導入,作為營運報表與資料分析的基礎應用系統。有鑒於此商機,本公司也研發了 Trinity 平台,提供客戶更多的選擇。

回顧公司經營自有品牌市場的歷程,開始時客戶大多都是全新導入;但隨著業務拓展與 Trinity 口碑廣傳 (既有使用者轉職新公司功不可沒),汰換客戶 ETL 的購案日益增多。

ETL 汰換的市場商機

隨著 ETL 用戶在企業分析應用的不斷深化,既有 ETL 工具或平台勢必面臨升級的需求。讓企業最終決定放棄升級而汰換現有 ETL 產品,有下列幾點考量。
  • 原有 ETL 產品功能不足,須尋求更優產品取代。
    採用 Microsoft SSIS 與 Teradata ETL Lite 產品的用戶,在深化其分析應用的過程中,都將認識到產品功能不足,因此必須選擇更強、更具彈性與前瞻性的新產品,以應對未來的商業挑戰。
     
  • 原有 ETL 產品維運成本高昂,因應公司 cost down 需求。
    外商產品通常價格與導入成本較高,從而後續的維護合約、版本升級成本也墊高。在企業 Cost down 與 “Do more with less” 的潮流下,尋求功能符合需求且相對實惠的產品取代,是使用單位對其預算做合理規劃的明智抉擇。
     
  • 原有 ETL 產品支援不盡如意,趁升級汰換之。
    外商產品相對於本土品牌,通常技術支援與服務的回應較慢;若有客製化需求,往往也只有本土廠商願意承接。與其遷就外商產品,若本土產品功能符合需求,還能提供更優質更即時的服務,則更換為本土品牌實有利於系統維護,從而增進維運績效。如有客製的考量,更是本土解決方案勝出。

ETL Migration

ETL 汰換案與所有電腦系統汰換類似,都必須作系統遷移 (System Migration)。這是大工程,需要使用單位與廠商協同作業,因此廠商的經驗與技術能力至關重要。

ETL Migration 需要仔細規劃和執行,以確保系統完整性和可靠性,其施行階段包括分析現有系統、設計目標系統、實施轉換策略和測試驗證等關鍵步驟,略述如下,其中第 3、4 階段最考驗廠商能力。
  1. 需求分析
    分析現有系統限制,明確新產品需求,客戶通常都是規劃更優的功能規格。
     
  2. 工具選擇
    綜合評估市場上的產品,選擇最適合的解決方案。
     
  3. 規劃與設計
    設計新的 ETL 架構,制定詳細的遷移計劃。
     
  4. 驗證與測試
    制定各階段測試程序,確保 ETL 遷移正確性。本階段通常耗時二、三個月。
     
  5. 分階段實施
    採用敏捷專案管理方法,逐步遷移 ETL 流程,確保業務連續性。
     
  6. 系統上線
    跨部門協商系統上線程序,避免系統服務中斷。
     
  7. 優化與培訓
    持續優化新系統,培訓團隊掌握新工具。
整體 ETL Migration 方法論如下圖。

ETL 汰換的不二選擇 – Trinity

選擇正確且適合自己企業自動化資料處理工具,除了能解決資料品質跟處理效能問題之外,也能為企業未來數據平台做準備。 Trinity 完美契合客戶 ETL 汰換的考量:
  • Trinity 具有強大的資料整合功能,出色的水平和垂直擴展能力,並且提供元數據管理、資料保護、地址正規化 …… 等應用模組,能夠提升企業數據分析之開發與管理。
     
  • Trinity 維運成本與升級費用合理,較外商產品實惠很多,有助於客戶預算之規劃運用。
     
  • Trinity 為唯一本土品牌,能提供外商產品更優質與即時的售前-售後一條龍服務;特別是因應用戶客製的需求,以滿足客戶為要。
除了產品面,ETL 汰換案更需要優秀的技術服務團隊投入。本公司專業服務(Professional Service)部門近年來陸續協助客戶將既有的 ETL 工具(諸如 Teradata DW Automation、Informatica、Microsoft SSIS、IBM DataStage 等)移轉到 Trinity ,並且在 ETL Migration 過程中提供專業建議進行架構調整與變數設計,幫助開發人員能夠快速上手並提高工作效率。累積客戶案例如下:
  • 電信:中華電信、台灣大哥大、遠傳電信
  • 銀行:華南銀行、國泰世華銀行、土地銀行、彰化銀行、富邦證券
  • 保險:安達人壽(原康健人壽)
  • 零售:康是美
  • 航空運輸:中華航空、長榮航空、陽明海運
  • 製造:群創光電
綜合而論,尋求功能強大、價格合理、可彈性客製化的 ETL 產品,以及建置/遷移經驗豐富、維護支援到位的技術團隊,耐特普羅公司 Trinity 產品,是企業的不二選擇!