數(shù)據(jù)中臺(tái)在企業(yè)數(shù)字化轉(zhuǎn)型中的價(jià)值

1. 數(shù)據(jù)整合與管理：數(shù)據(jù)中心可以整合和管理公司內(nèi)外的數(shù)據(jù)，形成統(tǒng)一的數(shù)據(jù)平臺(tái)。這將有助于消除數(shù)據(jù)孤島，提高數(shù)據(jù)質(zhì)量和一致性，為企業(yè)的決策和運(yùn)營(yíng)提供全面準(zhǔn)確的數(shù)據(jù)支持。

2. 數(shù)據(jù)服務(wù)：數(shù)據(jù)中臺(tái)以服務(wù)的形式向業(yè)務(wù)部門提供數(shù)據(jù)，使得數(shù)據(jù)更容易獲取和使用。這降低了業(yè)務(wù)部門使用數(shù)據(jù)的門檻，提高了數(shù)據(jù)的利用率和價(jià)值。

3. 數(shù)據(jù)驅(qū)動(dòng)決策：通過(guò)數(shù)據(jù)中心，企業(yè)可以更方便地分析和挖掘數(shù)據(jù)，發(fā)現(xiàn)數(shù)據(jù)中的規(guī)律和趨勢(shì)，為企業(yè)的決策提供數(shù)據(jù)支持。這有助于提高企業(yè)的決策效率和準(zhǔn)確性，降低決策風(fēng)險(xiǎn)。

4. 促進(jìn)商業(yè)創(chuàng)新：數(shù)據(jù)中心為企業(yè)提供了大量的數(shù)據(jù)和強(qiáng)大的數(shù)據(jù)處理能力，幫助企業(yè)發(fā)現(xiàn)新的商機(jī)和創(chuàng)新點(diǎn)，促進(jìn)企業(yè)的業(yè)務(wù)創(chuàng)新和發(fā)展。

數(shù)據(jù)中臺(tái)需要包含的核心模塊

1. 數(shù)據(jù)倉(cāng)庫(kù)：為企業(yè)存儲(chǔ)和管理大量數(shù)據(jù)，提供高效的數(shù)據(jù)統(tǒng)計(jì)和分析功能。

2. 數(shù)據(jù)湖：一種大型、集中式存儲(chǔ)庫(kù)，可以存儲(chǔ)所有隨機(jī)規(guī)模的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。

3. 數(shù)據(jù)集成工具：用來(lái)整合和清潔不同來(lái)源的數(shù)據(jù)，確保數(shù)據(jù)的真實(shí)性和一致性。

4. 資料分析工具：提供可視化的數(shù)據(jù)分析功能，幫助用戶發(fā)現(xiàn)數(shù)據(jù)中的規(guī)律和趨勢(shì)。

5. 資料挖掘工具：深入挖掘算法和模型數(shù)據(jù)，發(fā)現(xiàn)數(shù)據(jù)中的潛在價(jià)值和相關(guān)性。

6. 資料服務(wù)平臺(tái)：以服務(wù)的形式向業(yè)務(wù)部門提供數(shù)據(jù)，包括API數(shù)據(jù)、數(shù)據(jù)統(tǒng)計(jì)、數(shù)據(jù)推送等功能。

第三，數(shù)據(jù)中臺(tái)產(chǎn)品架構(gòu)

圖表：網(wǎng)易數(shù)據(jù)中臺(tái)產(chǎn)品矩陣

數(shù)據(jù)臺(tái)的目的是：效率、成本、復(fù)用、業(yè)務(wù)數(shù)據(jù)化、數(shù)據(jù)資產(chǎn)化、資產(chǎn)業(yè)務(wù)化。降低獲取和維護(hù)業(yè)務(wù)創(chuàng)新過(guò)程所需數(shù)據(jù)的成本，使數(shù)據(jù)分析和大數(shù)據(jù)人工智能技術(shù)更加快捷。很多文章會(huì)說(shuō)，數(shù)據(jù)中臺(tái)輸出是API，API就是服務(wù)，但是一個(gè)API要更快更高效的導(dǎo)出，要看數(shù)據(jù)同步、數(shù)據(jù)清理加工、資產(chǎn)沉淀等多個(gè)運(yùn)行階段。桶效應(yīng)，任何部分都有缺點(diǎn)，整體效率不會(huì)高。所以，我把數(shù)據(jù)中臺(tái)的產(chǎn)品架構(gòu)分成五層：

數(shù)據(jù)服務(wù)層:基于數(shù)據(jù)資產(chǎn)、平臺(tái)工具輸出分析服務(wù)、數(shù)據(jù)統(tǒng)計(jì)服務(wù)、可視化服務(wù)、標(biāo)簽、算法服務(wù)等。

資產(chǎn)層：包括資產(chǎn)建設(shè)、資產(chǎn)管理、資產(chǎn)盤點(diǎn)等數(shù)倉(cāng)模型。

數(shù)據(jù)處理層:基于領(lǐng)域模型進(jìn)行ETL的過(guò)程，包括R&D、調(diào)度、運(yùn)輸、運(yùn)營(yíng)和維護(hù)批次和流動(dòng)數(shù)據(jù)。

數(shù)據(jù)集成層：數(shù)據(jù)進(jìn)入湖泊的第一步，將不同數(shù)據(jù)庫(kù)的數(shù)據(jù)同步到統(tǒng)一的數(shù)據(jù)倉(cāng)庫(kù)或數(shù)據(jù)湖泊。

基礎(chǔ)設(shè)施層：底層是大數(shù)據(jù)集群服務(wù)，包括存儲(chǔ)、計(jì)算、資源調(diào)度和Hadoop生態(tài)系統(tǒng)的各部件管理。

四是數(shù)據(jù)中臺(tái)常用數(shù)據(jù)產(chǎn)品

1.數(shù)據(jù)收集

定位：提供企業(yè)內(nèi)外數(shù)據(jù)收集解決方案，為大數(shù)據(jù)分析應(yīng)用提供原始數(shù)據(jù)支持。這是公司的“數(shù)據(jù)石油”。沒(méi)有數(shù)據(jù)，大數(shù)據(jù)就是無(wú)源之水。

商品模塊：埋點(diǎn)解決方案&埋點(diǎn)管理平臺(tái)、爬蟲(chóng)系統(tǒng)、數(shù)據(jù)填報(bào)系統(tǒng)

2.部件管理

定位：大數(shù)據(jù)部件管理平臺(tái)，以配置化的流程取代人肉命令行操作、運(yùn)維大數(shù)據(jù)集群及各部件。

商品模塊：云平臺(tái)，HDFS管理，Kafka管理，Hbase管理，ES管理，

3.開(kāi)發(fā)套件

定位：實(shí)用、自動(dòng)數(shù)據(jù)采集、同步、加工到應(yīng)用過(guò)程中，提高數(shù)據(jù)開(kāi)發(fā)效率，降低開(kāi)發(fā)成本，縮短業(yè)務(wù)創(chuàng)新數(shù)據(jù)需求周期。

商品模塊：數(shù)據(jù)集成，離線開(kāi)發(fā)平臺(tái)，即時(shí)開(kāi)發(fā)平臺(tái)，智能運(yùn)維平臺(tái)，機(jī)器學(xué)習(xí)平臺(tái)

4.數(shù)據(jù)資產(chǎn)

定位：沉淀數(shù)據(jù)資產(chǎn)，公開(kāi)資產(chǎn)目錄，幫助信息共享，并根據(jù)數(shù)據(jù)審計(jì)規(guī)則對(duì)數(shù)據(jù)質(zhì)量進(jìn)行監(jiān)控，從源頭上保證數(shù)據(jù)的準(zhǔn)確性和高可用性，統(tǒng)一權(quán)限控制，確保數(shù)據(jù)安全。

商品模塊：資產(chǎn)管理中心，數(shù)據(jù)地圖，數(shù)據(jù)血緣，指標(biāo)系統(tǒng)，數(shù)據(jù)質(zhì)量監(jiān)控，模型建設(shè)平臺(tái)，資產(chǎn)管理中心

5.數(shù)據(jù)治理

定位：對(duì)低效率或無(wú)價(jià)值的數(shù)據(jù)和任務(wù)進(jìn)行處理，釋放存儲(chǔ)&計(jì)算資源，實(shí)現(xiàn)對(duì)數(shù)據(jù)資產(chǎn)成本的精細(xì)化管理。

商品模塊：成本優(yōu)化中心，數(shù)據(jù)安全中心

6.分析應(yīng)用

定位：匯集和管理跨域數(shù)據(jù)以實(shí)用的方式包裝數(shù)據(jù)能力，將數(shù)據(jù)應(yīng)用于業(yè)務(wù)決策、產(chǎn)品優(yōu)化、精細(xì)化運(yùn)營(yíng)等環(huán)節(jié)，挖掘數(shù)據(jù)價(jià)值，賦能業(yè)務(wù)。

商品模塊：

資料分析：Adhoc查詢，用戶行為分析系統(tǒng)，自助分析，敏捷BI、數(shù)據(jù)可視化平臺(tái)，智能分析平臺(tái)

智能商品：智能推薦，用戶畫(huà)像和精準(zhǔn)營(yíng)銷平臺(tái)

7.數(shù)據(jù)服務(wù)

定位：基于數(shù)據(jù)中臺(tái)思想，API服務(wù)可以快速導(dǎo)出數(shù)據(jù)，同時(shí)具有服務(wù)監(jiān)控和管理水平。

商品模塊：API服務(wù)平臺(tái)，推薦平臺(tái)，智能預(yù)警&數(shù)據(jù)訂閱(從人數(shù)到人數(shù))

8.通用功能

定位：抽象各種數(shù)據(jù)產(chǎn)品的通用模塊，提供統(tǒng)一的服務(wù)水平，減少各種商品的重復(fù)建設(shè)，降低開(kāi)發(fā)成本

商品模塊：工單系統(tǒng)，信息中心，幫助中心，統(tǒng)一權(quán)限，商品導(dǎo)航，需求中心

四、總結(jié)

對(duì)于數(shù)據(jù)中臺(tái)商品，每個(gè)公司都在做很多類似的事情。作為數(shù)據(jù)產(chǎn)品經(jīng)理，你目前在哪個(gè)產(chǎn)品領(lǐng)域工作？未來(lái)職業(yè)發(fā)展規(guī)劃應(yīng)該考慮哪個(gè)模塊的商品工作？希望這篇文章能啟發(fā)你。

本文來(lái)自微信公眾號(hào)“數(shù)據(jù)干飯人”（ID:作者：千冰儀，36氪經(jīng)授權(quán)發(fā)布，zhuangxiu1314)。

本文僅代表作者觀點(diǎn)，版權(quán)歸原創(chuàng)者所有，如需轉(zhuǎn)載請(qǐng)?jiān)谖闹凶⒚鱽?lái)源及作者名字。

免責(zé)聲明：本文系轉(zhuǎn)載編輯文章，僅作分享之用。如分享內(nèi)容、圖片侵犯到您的版權(quán)或非授權(quán)發(fā)布，請(qǐng)及時(shí)與我們聯(lián)系進(jìn)行審核處理或刪除，您可以發(fā)送材料至郵箱：service@tojoy.com