解決數據配送到應用的挑戰

現在企業的組織與應用日趨複雜,不只過去主管需要綜合報表,只需要請 DBA 或者 IT 部門把數據產出即可。現在大小企業慢慢流行『數據導向決策』希望所有決策與報告更即時更準確。而且每個應用端的使用狀況也越來越複雜,不論是在每個部門在獲取數據來自於許多不同的渠道,應用的工具也越來越多。

企業數據上的兩大問題

1. 數據整合

各種不同的資料格式與資料,存在於企業的不同部門與系統中,要如何把數據整合在一起以及穩定的供應結果,是企業數據的第一個挑戰。一般企業建置許多 ETL 去把資料從不同資料源拉出來,整理後存到相對應的資料庫、資料倉儲中。

然而現在在數據整合上 MIS/IT 部門當在做數據整合時會遇到許多挑戰

  1. 數據版本控制

    要如何有效管理過去與現在的數據在同一個數據平台上,在一個平台上我們要如何去做版本數據的回溯與記錄。

  2. 數據延遲性

    現在數據處理一般都會經由 ETL > Staging Area > Data Warehouse > Data Mart > End User,這個週期會照成數據的延遲性,因為數據不斷在落地儲存與讀取。

  3. 難以理解業務應用場景

  4. 數據維護與安全管理

  5. 數據審查與監督

  6. 擴充性與穩定度

2. 資訊分配

除了數據整合的困難外,資訊的分配也是現在企業數據的另一大挑戰。

  1. 數據應用範圍越來越廣
  2. 數據儲存的地方越來越散
  3. IT 與營運的依賴度高
  4. 數據呈現權限

如何在不同應用場景可以快速且安全的呈現所需數據,以及如何讓數據有效的運算與聚合都是現在企業目前想要找尋的解決方案。

complex

問題一:資料整合與資訊流通挑戰

企業數據管理一直是企業一大挑戰,主要挑戰為數據聚合單位(IT/MIS)以及數據應用單位(營運)挑戰。

IT/MIS 挑戰:

  • 版本控制
  • 延遲性
  • 難以理解業務應用場景
  • 資料維護
  • 安全性疑慮
  • 風險控管
  • 擴充性

營運挑戰:

  • 多種資料使用方式
  • 取得資料困難
  • IT 與營運依賴度高
  • 權限管理

1_flow_problem

問題二:如何管理大量資料源的資料權限?

資料安全與權限控管

  • 如何讓每個單位的人看到不一樣的資料?
  • 如何讓單位的人只能讓他擁有的權限資料做運算?
  • 如何有彈性的撤回與新增各種專案人員的權限?
  • 如何整合我內部既有的登入登出系統,像是 SSO, OpenID 等?
  • 如何讓不同情境應用像是 SDK, BI 報表資料源頭端進行資料管理與監控?

2_flow_problem

問題三:如何管理大量資料源的流量與使用狀況?

流量與使用狀況監控

  • 如何控制運算層所有應用單位的使用管制?
  • 如何做到資料操作活動紀錄?
  • 如何限制單位使用 RAM 的大小?
  • 如何有效控制 Inbound 以及 Outbound Network 流量?
  • 如何有效控制 Concurrency 以及 SQL Queue?

3_flow_problem

問題四:如何資料協作與加速 BI 運算與各種應用?

資料協作與在各種應用使用

  • 如何讓 BI 軟體上有大資料運算?
  • 如何有 BI 軟體資料監控與自動擴張?
  • 如何使用單位應用端使用的資源 RAM 的大小?
  • 如何有效控制 Inbound 以及 Outbound Network 流量?
  • 如何有效控制在不同的應用上安全性?Token 機制要如何建立?

4_flow_problem

CannerFlow 數據虛擬化解決方案

CannerFlow 數據虛擬化解決方案,讓企業可以用最簡單的方式建立數據平台,來達到最有效的方式進行數據整合與資訊分配。