在搭建大數(shù)據(jù)分析平臺之前，要先明確業(yè)務需求場景以及用戶的需求，通過大數(shù)據(jù)分析平臺，想要得到哪些有價值的信息，需要接入的數(shù)據(jù)有哪些，明確基于場景業(yè)務需求的大數(shù)據(jù)平臺要具備的基本功能，來決定平臺搭建過程中使用的大數(shù)據(jù)處理工具和框架。

大數(shù)據(jù)分析平臺自下而上一般分為三個部分，分別為：數(shù)據(jù)層、大數(shù)據(jù)采集與存儲、數(shù)據(jù)分析及展示。

（1）數(shù)據(jù)層，針對不同系統(tǒng)進行分析，制定系統(tǒng)數(shù)據(jù)采集范圍與目標，收集各個業(yè)務系統(tǒng)產(chǎn)生的各類數(shù)據(jù)，將各種結構化和非結構化數(shù)據(jù)進行整合，為大數(shù)據(jù)的分析提供支撐。

（2）大數(shù)據(jù)采集與存儲旨在為各類異構數(shù)據(jù)研制適配接口，與其他各系統(tǒng)對接，并為數(shù)據(jù)提供適配、轉(zhuǎn)換、存儲等基本管理功能，基本步驟包括：

數(shù)據(jù)抽取：針對大數(shù)據(jù)分析平臺需要采集的各類數(shù)據(jù)，分別有針對性地研制適配接口。對于已有的信息系統(tǒng)，研發(fā)對應的接口模塊與各信息系統(tǒng)對接，不能實現(xiàn)數(shù)據(jù)共享接口的系統(tǒng)通過ETL工具進行數(shù)據(jù)采集，支持多種類型數(shù)據(jù)庫，按照相應規(guī)范對數(shù)據(jù)進行清洗轉(zhuǎn)換，從而實現(xiàn)數(shù)據(jù)的統(tǒng)一存儲管理。

數(shù)據(jù)預處理：為使大數(shù)據(jù)分析平臺能更方便對數(shù)據(jù)進行處理，同時為了使得數(shù)據(jù)的存儲機制擴展性、容錯性更好，需要把數(shù)據(jù)按照相應關聯(lián)性進行組合，并將數(shù)據(jù)轉(zhuǎn)化為文本格式，作為文件存儲下來。

數(shù)據(jù)存儲：為了提升數(shù)據(jù)存儲的擴展性和容錯性，采用主流的大數(shù)據(jù)框架對各類數(shù)據(jù)統(tǒng)一進行文本化存儲，數(shù)據(jù)按相應規(guī)則存儲，實現(xiàn)每日保存一套完整數(shù)據(jù)文件集，形成數(shù)據(jù)倉庫。

（3）數(shù)據(jù)分析和展示是核心業(yè)務層，通過數(shù)據(jù)報表工具，根據(jù)需求制定多樣的，針對性的數(shù)據(jù)報表。針對存儲的數(shù)據(jù)進行數(shù)據(jù)處理、算法運行、結果轉(zhuǎn)換操作，將結果保存為報表文件，每日形成的報表文件集。報表展現(xiàn)系統(tǒng)將生成的報表文件以可視化方式進行展現(xiàn)。

系統(tǒng)架構應高安全性、易擴展性，能夠支持各類主流開發(fā)語言，并提供豐富的接口。同時能夠支持結構化和非結構化數(shù)據(jù)的存儲和應用。通過建立物聯(lián)網(wǎng)應用，實現(xiàn)對物品、人員、安全等各方面管理的強大支撐，提升管理質(zhì)量的同時積累大量管理數(shù)據(jù)和行為數(shù)據(jù)。

大數(shù)據(jù)分析平臺是企業(yè)一體化的大數(shù)據(jù)分析與應用平臺，為企業(yè)提供大數(shù)據(jù)分析與決策。

建設大數(shù)據(jù)分析平臺以安全、可擴展、靈活性為原則，把某些有業(yè)務聯(lián)系的單圖組織成一個數(shù)據(jù)可視化的模塊，用來反映業(yè)務各方面的數(shù)據(jù)情況，它從多種數(shù)據(jù)源獲取數(shù)據(jù)，實現(xiàn)支持多維度篩選的交互式界面。

大數(shù)據(jù)分析平臺由哪些部分組成．中琛魔方大數(shù)據(jù)分析平臺表示大數(shù)據(jù)分析處理平臺（zcmorefun．com）就是整合當前主流的各種具有不同側(cè)重點的大數(shù)據(jù)處理分析框架和工具，實現(xiàn)對數(shù)據(jù)的挖掘和分析。一個大數(shù)據(jù)分析平臺涉及到的組件眾多，如何將其有機地結合起來，完成海量數(shù)據(jù)的挖掘是一項復雜的工作。

責任編輯：gt