Back to list
【應用架構】 BI 加速器
2022/07/05

企業導入 BI 應用是現在不可或缺的商務工具,但越來越多部門參與 BI 資料視覺化的使用,常見到的挑戰就是效能瓶頸。常常在 BI 中看較大量的資料或同時有多人查看資料時,就會造成資料跑很久或請求超時。

回溯 BI 效能瓶頸原因

BI 工具如 Power BITableau 都為此各有相關的資料供資料分析師優化,例如:去除資料雜質、降低圖表複雜度,格式欄位都要一一調整。

以下圖來看,很多公司直接把 BI 工具連結在各種資料儲存之後,所以異質資料整合並且同質化、跨資料集格式轉換、以及為了要給不同使用者不同的資料及,需要在 BI 中重複複製相似的資料集遮罩、過濾後授權給不同單位的人查看。

資料整合、轉換、複製、授權、過濾、遮罩這些資料運算相關能力都需要 BI 本身的效能運算來達成。因為此原因,所以 BI 軟體花了很多的資源不是在資料的呈現,而是在做『資料運算』,讓 BI 很快就會遇到效能上的挑戰。

flow before

BI 加速分離運算與呈現

Canner Enterprise 作為資料調用管理平台,讓資料再進入到 BI 之前把資料整合、轉換、授權、過濾、遮罩資料作業都完成,大幅降低需要在 BI 中需要額外運算的資源。

Canner Enterprise 加速 BI 呈現,透過以下主要功能:

  1. 資料虛擬化: Canner 提供 20 種以上異質資料連結器,讓儲存資料同質化,包含資料湖、資料倉儲、SQL 引擎或是資料庫等,都可以透過 UI 介面上操作。 能讓資料『零搬移、零複製』的情況下,大數據運算完後推送到前端呈現。
  2. MPP 平行式加速運算:Canner Enterprise 基於 MPP 設計架構,將數據分散到多節點運算,讓資料不會受到大數據量級的瓶頸。
  3. UI 操作過濾與授權:針對不同的使用者以及群體,不需要再複製多種類似的資料集,為了給不同的群體使用與操作,透過 Canner Enterprise 資料管理員,能夠讓每個人看到不同欄位等級的資料集在不需複製資料的情況下。
  4. 資料壓縮推送 (Data Push) :透過 Canner Enterprise 的 Data Push 功能,針對特殊的 BI 軟體,能夠先在系統中先做壓縮在同步至 BI 軟體中例如:使用 Tableau,Canner Enterprise 會先把資料轉換成 Hyper File 主動的推送同步到 Tableau 中,讓佔用 BI 系統中資源極小化。

data_consumption.png

讓 BI 以外的應用工具,共享資料加速

透過 Canner 作為 BI 加速器,先行進行資料整合、轉換、複製、授權、過濾、遮罩,可大量降低 BI 工具所需高運算量的依賴。讓企業內部 BI 以外的資料分析工具像是 SAS、R、Python 或是 AI 軟體都能夠共同應用處理後的資料,不需要額外在這些系統中去重複加工數據。

flow after

本公司圖文版權所有,轉載請註明出處。

Share to your friends:
申請試用 Canner
申請試用