數(shù)據(jù)中臺(tái)的價(jià)值

　　幾十年的信息化發(fā)展歷程，就是“業(yè)務(wù)數(shù)據(jù)化”的過(guò)程——無(wú)論是一家公司或者是一個(gè)機(jī)構(gòu)當(dāng)它持續(xù)不斷在IT方面進(jìn)行投入和建設(shè)，不斷將自身發(fā)展過(guò)程中業(yè)務(wù)模式和經(jīng)營(yíng)管理端的各種能力以數(shù)據(jù)指標(biāo)的形態(tài)沉淀累計(jì)下來(lái)。 

　　利用沉淀積累的數(shù)據(jù)進(jìn)行業(yè)務(wù)上的優(yōu)化升級(jí)，則是將已經(jīng)成為企業(yè)數(shù)字資產(chǎn)的“業(yè)務(wù)大數(shù)據(jù)”作為生產(chǎn)資料融入業(yè)務(wù)價(jià)值的創(chuàng)造過(guò)程，使之持續(xù)產(chǎn)生更長(zhǎng)遠(yuǎn)的價(jià)值。 

　　數(shù)據(jù)中臺(tái)就是實(shí)現(xiàn)”數(shù)據(jù)業(yè)務(wù)化“的基礎(chǔ)！

1、IT建設(shè)的問(wèn)題與發(fā)展

系統(tǒng)越多，數(shù)據(jù)孤島現(xiàn)象越嚴(yán)重 

隨著信息化的不斷加深，在傳統(tǒng)的“煙囪式”IT產(chǎn)品工具系統(tǒng)的搭建模式下，企業(yè)獨(dú)立采購(gòu)或者定制開(kāi)發(fā)的各種信息軟件，會(huì)在企業(yè)日常運(yùn)維的內(nèi)部形成眾多數(shù)據(jù)孤島；而在互聯(lián)網(wǎng)、移動(dòng)互聯(lián)網(wǎng)背景下，小程序、O2O平臺(tái)等新模式下產(chǎn)生的外部新鮮數(shù)據(jù)與傳統(tǒng)系統(tǒng)的內(nèi)部數(shù)據(jù)有效直接互通，這進(jìn)一步加劇了數(shù)據(jù)孤島問(wèn)題……系統(tǒng)多樣性和多態(tài)性，增加了企業(yè)IT架構(gòu)的復(fù)雜度。

云時(shí)代下多云策略使得IT架構(gòu)更加復(fù)雜 

IT硬件基礎(chǔ)設(shè)施從PC時(shí)代的計(jì)算服務(wù)器演變成DT時(shí)代的萬(wàn)物“云”，絕大多數(shù)企業(yè)現(xiàn)今及未來(lái)都將選取多云策略，以避免被單一云廠商鎖定，且多云可以讓企業(yè)系統(tǒng)內(nèi)的IT架構(gòu)更靈活、更符合自身情況。但這也讓企業(yè)IT架構(gòu)變得更為復(fù)雜，不同云服務(wù)商之間的底層數(shù)據(jù)的互聯(lián)互通成為困擾企業(yè)發(fā)展的痛點(diǎn)之一。每一次系統(tǒng)之間的同步，帶寬的消耗都是云服務(wù)商掙取利潤(rùn)的主要來(lái)源。

IT 發(fā)展迫切進(jìn)入新階段 

企業(yè)信息化發(fā)展目前正處于從數(shù)據(jù)集成向數(shù)據(jù)管理階段轉(zhuǎn)變的關(guān)鍵時(shí)期，數(shù)據(jù)管理從分散向集中發(fā)展，從不規(guī)范向規(guī)范化發(fā)展；信息系統(tǒng)建設(shè)從單項(xiàng)建設(shè)向集成化發(fā)展

2、數(shù)據(jù)中臺(tái)的價(jià)值

1）數(shù)據(jù)價(jià)值 

數(shù)據(jù)是企業(yè)已有業(yè)務(wù)和管理思想的結(jié)晶，數(shù)據(jù)中臺(tái)幫助企業(yè)對(duì)數(shù)據(jù)進(jìn)行整合，進(jìn)一步挖掘數(shù)據(jù)價(jià)值，從而達(dá)成賦能業(yè)務(wù)的目的。通過(guò)構(gòu)建數(shù)據(jù)中臺(tái)實(shí)現(xiàn)3大核心價(jià)值：整合、共享、賦能。

整合·數(shù)據(jù)資產(chǎn)

工作剛需：消除數(shù)據(jù)孤島，匯聚企業(yè)內(nèi)外部數(shù)據(jù)，形成數(shù)據(jù)資產(chǎn) 

對(duì)接業(yè)務(wù)核心數(shù)據(jù)，打通ERP、MES、PLM、CRM、HR等信息系統(tǒng)，建立統(tǒng)一的數(shù)據(jù)標(biāo)準(zhǔn)，梳理基礎(chǔ)數(shù)據(jù)與交易數(shù)據(jù)，消除數(shù)據(jù)孤島，匯聚企業(yè)內(nèi)夯實(shí)數(shù)據(jù)資產(chǎn)基礎(chǔ)

數(shù)據(jù)資源盤點(diǎn)、聯(lián)接、規(guī)范管理，形成企業(yè)的“數(shù)據(jù)資產(chǎn)”管理體系。幫助解決傳統(tǒng)信息系統(tǒng)建設(shè)過(guò)程中，因”煙囪式“架構(gòu)導(dǎo)致的數(shù)據(jù)隔離、數(shù)據(jù)不一致等問(wèn)題，避免“數(shù)據(jù)孤島”的出現(xiàn)。

共享·數(shù)據(jù)資源

歸納總結(jié)：主動(dòng)針對(duì)數(shù)據(jù)進(jìn)行思考分析，追根溯源，查找原因，為決策提供支持 

圍繞著能給業(yè)務(wù)帶來(lái)價(jià)值的數(shù)據(jù)資產(chǎn)進(jìn)行建設(shè)，形成統(tǒng)一的數(shù)據(jù)資產(chǎn)體系，使企業(yè)數(shù)據(jù)中臺(tái)體系初具雛形，以能滿足企業(yè)業(yè)務(wù)對(duì)數(shù)據(jù)的需求。

避免重復(fù)開(kāi)發(fā)，確保前端業(yè)務(wù)“輕量化”。數(shù)據(jù)中臺(tái)要求“整合、共享“，因此業(yè)務(wù)前端需要的數(shù)據(jù)應(yīng)用能力必須經(jīng)過(guò)數(shù)據(jù)中臺(tái)進(jìn)行實(shí)現(xiàn)，這樣既確保了前端業(yè)務(wù)的輕量化，又鞏固了數(shù)據(jù)中臺(tái)作為關(guān)鍵地位，實(shí)現(xiàn)數(shù)據(jù)資源的共享與開(kāi)發(fā)效率的提升。

賦能·業(yè)務(wù)創(chuàng)新 

賦能創(chuàng)新：借助大數(shù)據(jù)AI技術(shù)，以演繹方式通過(guò)數(shù)據(jù)實(shí)現(xiàn)業(yè)務(wù)智能化 

提供便捷、快速的數(shù)據(jù)服務(wù)能力，選擇具體業(yè)務(wù)場(chǎng)景，結(jié)合AI算法，讓相關(guān)人員能夠迅速開(kāi)發(fā)數(shù)據(jù)應(yīng)用，實(shí)現(xiàn)“場(chǎng)景+算法+數(shù)據(jù)”的智慧創(chuàng)新場(chǎng)景的應(yīng)用，充分發(fā)揮數(shù)據(jù)價(jià)值。

通過(guò)數(shù)據(jù)的統(tǒng)一數(shù)據(jù)服務(wù)，將企業(yè)基礎(chǔ)數(shù)據(jù)能力整合在數(shù)據(jù)中臺(tái)中，并開(kāi)放給前端業(yè)務(wù)進(jìn)行調(diào)用，實(shí)現(xiàn)了自主驅(qū)動(dòng)、賦能業(yè)務(wù)的最終目的。

2）實(shí)現(xiàn)企業(yè)數(shù)字化愿景 

• 實(shí)現(xiàn)基于數(shù)據(jù)的管理：基于中臺(tái)構(gòu)建面向業(yè)務(wù)應(yīng)用的全量數(shù)據(jù)分析

• 從“業(yè)務(wù)驅(qū)動(dòng)數(shù)據(jù)”走向“數(shù)據(jù)驅(qū)動(dòng)業(yè)務(wù)”企業(yè)

• 實(shí)現(xiàn)智能企業(yè)，建立大數(shù)據(jù)BI平臺(tái)，打造智能企業(yè)的大腦，幫助企業(yè)實(shí)現(xiàn)從透明化到智能化的閉環(huán)管理

數(shù)據(jù)中臺(tái)建設(shè)

1、數(shù)據(jù)集成方案

1）手工數(shù)據(jù)填報(bào) 

對(duì)于企業(yè)手工線下EXCEL的數(shù)據(jù)，可通過(guò)在線填報(bào)方式進(jìn)行統(tǒng)一采集與管理。

• 模版定義：定義補(bǔ)錄模板，包括目標(biāo)數(shù)據(jù)庫(kù)，補(bǔ)錄列字段名稱、類型、長(zhǎng)度、校驗(yàn)方式、默認(rèn)值等信息，更新方式、是否審批等策略

• 數(shù)據(jù)補(bǔ)錄：根據(jù)補(bǔ)錄模版動(dòng)態(tài)生成不同補(bǔ)錄頁(yè)面，支持excel批量錄入、校驗(yàn)、提交

• 補(bǔ)錄查看：查看、下載已補(bǔ)錄數(shù)據(jù)，并支持對(duì)已導(dǎo)入數(shù)據(jù)編輯、修改操作

2）離線/批處理 

可通過(guò)圖形化配置化頁(yè)面實(shí)現(xiàn)數(shù)據(jù)的同步：

• 定義同步任務(wù)，可視化配置源端和目標(biāo)端；

• 提供任意異構(gòu)數(shù)據(jù)源間的同步，以及Excel、API等；

• 支持多種同步方式（Datax、Kettle）；

• 提供批量同步的方式，一次創(chuàng)建多張表的同步任務(wù)；

• 可配置多種同步策略，包括增量、讀取配置、寫入配置、容錯(cuò)率等；

• 可通過(guò)查看引用快速定位數(shù)據(jù)集成的調(diào)度作業(yè)，及查看作業(yè)運(yùn)行日志

3）實(shí)時(shí)同步 

通過(guò)kafak+flink實(shí)現(xiàn)數(shù)據(jù)的實(shí)時(shí)更新，滿足基于流式計(jì)算統(tǒng)一解決數(shù)據(jù)集成的各種場(chǎng)景，正常情況：

• Kafka會(huì)保留一段時(shí)間的隊(duì)列

• 入倉(cāng)數(shù)據(jù)都有時(shí)間戳

• Flink 處理過(guò)程會(huì)記錄到控制表

3、數(shù)據(jù)應(yīng)用 

1）數(shù)據(jù)可視化應(yīng)用

2）數(shù)據(jù)API服務(wù) 

除了提供報(bào)表可視化服務(wù)以外，還可通過(guò)API方式為各應(yīng)用場(chǎng)景提供數(shù)據(jù)服務(wù)，形成數(shù)據(jù)閉環(huán)管控

• 面向各類數(shù)據(jù)應(yīng)用場(chǎng)景，統(tǒng)一數(shù)據(jù)倉(cāng)庫(kù)對(duì)外數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)

• 整合應(yīng)用需求，持續(xù)完善數(shù)據(jù)倉(cāng)庫(kù)服務(wù)能力，底層能力迭代不影響前端業(yè)務(wù)

• 統(tǒng)一的服務(wù)管理提升了數(shù)據(jù)安全防護(hù)，數(shù)據(jù)審計(jì)，數(shù)據(jù)調(diào)用統(tǒng)計(jì)的效率