九色国产,午夜在线视频,新黄色网址,九九色综合,天天做夜夜做久久做狠狠,天天躁夜夜躁狠狠躁2021a,久久不卡一区二区三区

打開APP
userphoto
未登錄

開通VIP,暢享免費(fèi)電子書等14項(xiàng)超值服

開通VIP
多圖詳解數(shù)據(jù)中臺(tái)建設(shè)框架(建議收藏)
大數(shù)據(jù)DT
提供大數(shù)據(jù)、AI等領(lǐng)域干貨學(xué)習(xí)資源的「寶藏號」,跟50萬技術(shù)人共同成長,一起玩轉(zhuǎn)大數(shù)據(jù)、Python、數(shù)據(jù)分析、數(shù)據(jù)科學(xué)、人工智能!還會(huì)有各種好玩又奇葩的數(shù)據(jù)解讀,邊學(xué)習(xí)邊吃瓜!
531篇原創(chuàng)內(nèi)容
公眾號

導(dǎo)讀:近日,舞動(dòng)數(shù)字·2021數(shù)字化轉(zhuǎn)型系列論壇由機(jī)械工業(yè)出版社華章公司成功舉辦。在數(shù)字化能力與平臺(tái)構(gòu)建專場中,《數(shù)據(jù)中臺(tái)》的核心作者、數(shù)瀾咨詢及解決方案的負(fù)責(zé)人鐵平老師發(fā)表了主題演講。

鐵平老師從技術(shù)、服務(wù)、數(shù)據(jù)、運(yùn)營4個(gè)體系回顧了數(shù)據(jù)中臺(tái)建設(shè)框架1.0,并在此基礎(chǔ)上優(yōu)化給出了數(shù)據(jù)中臺(tái)建設(shè)框架2.0,同時(shí)指出數(shù)據(jù)中臺(tái)是企業(yè)數(shù)字化轉(zhuǎn)型的關(guān)鍵創(chuàng)新引擎。

以下為演講全文,大數(shù)據(jù)DT經(jīng)授權(quán)發(fā)布。

作者:鐵平
來源:大數(shù)據(jù)DT(ID:hzdashuju)

今天我給大家分享一下企業(yè)數(shù)據(jù)中臺(tái)的建設(shè)框架。我叫沈金,花名是鐵平,是目前數(shù)瀾咨詢及解決方案的負(fù)責(zé)人,是《數(shù)據(jù)中臺(tái)》的核心作者之一,也在去年撰寫了《數(shù)據(jù)中臺(tái)咨詢白皮書》。

從我個(gè)人的經(jīng)歷來講,前5年做的事情更多是讓數(shù)據(jù)跑起來,所以更多關(guān)注的是數(shù)據(jù)庫,以及數(shù)據(jù)庫相關(guān)的一些工作。后七八年更多關(guān)注于讓數(shù)據(jù)用起來,所以關(guān)注整體的數(shù)據(jù)架構(gòu),包括數(shù)據(jù)的整體解決方案。是早期阿里集團(tuán)OneID的一個(gè)核心開發(fā)者以及運(yùn)營者。

01 數(shù)據(jù)中臺(tái):企業(yè)數(shù)字化轉(zhuǎn)型關(guān)鍵創(chuàng)新引擎

關(guān)于數(shù)據(jù)中臺(tái),我們有一個(gè)觀點(diǎn),就是我們始終認(rèn)為數(shù)據(jù)中臺(tái)是一種讓企業(yè)數(shù)據(jù)快速持續(xù)用起來的機(jī)制,它絕對不是一個(gè)技術(shù)平臺(tái)。通過數(shù)據(jù)中臺(tái)可以讓企業(yè)擁有什么呢?

  • 第一,讓企業(yè)擁有數(shù)據(jù)價(jià)值釋放的一個(gè)通道能力。

  • 第二,讓企業(yè)具備開發(fā)整個(gè)復(fù)用、快速試錯(cuò)的一個(gè)交付能力。

  • 第三,讓企業(yè)擁有數(shù)據(jù)交換、數(shù)據(jù)資產(chǎn)化,以及資產(chǎn)服務(wù)化的技術(shù)能力。

所以,數(shù)據(jù)中臺(tái)是不是技術(shù)平臺(tái)?其實(shí)在去年7月份,Gartner頒布了一個(gè)《2020中國ICT成熟度曲線報(bào)告》,正式建議企業(yè)的管理者把數(shù)據(jù)中臺(tái)當(dāng)作整個(gè)數(shù)據(jù)化轉(zhuǎn)型的關(guān)鍵創(chuàng)新引擎,從而解決數(shù)字化的收入,以及實(shí)現(xiàn)可持續(xù)的交互的業(yè)務(wù)能力。

第二個(gè)觀點(diǎn),Gartner建議企業(yè)CIO把數(shù)據(jù)中臺(tái)當(dāng)作一個(gè)開發(fā)復(fù)用和數(shù)據(jù)資產(chǎn)組合的組織策略。而且數(shù)瀾非常有幸成為國內(nèi)首批入選數(shù)據(jù)中臺(tái)標(biāo)桿供應(yīng)商的一個(gè)企業(yè)。

所以,Gartner的觀點(diǎn)就是數(shù)據(jù)中臺(tái)是企業(yè)數(shù)字化轉(zhuǎn)型的一個(gè)關(guān)鍵的創(chuàng)新引擎,大家也可以從這些大的曲線里面看到。

02 數(shù)據(jù)中臺(tái)建設(shè)框架1.0回顧

然后,我們在2019年詳細(xì)解釋了數(shù)據(jù)中臺(tái)建設(shè)的框架1.0的版本。今天我們首先回顧一下,把它分解成一二三四五:

一是戰(zhàn)略轉(zhuǎn)型的訴求。

兩個(gè)保障的條件:

  1. 關(guān)于組織流程。

  2. 關(guān)于數(shù)據(jù)認(rèn)知。

數(shù)據(jù)中臺(tái)的三個(gè)建設(shè)目標(biāo),就是怎么圍繞數(shù)據(jù)的可見、可用和可運(yùn)營。

以及在大的目標(biāo)的牽引下面,我們?nèi)ヒ?guī)劃整體的四大體系,就是典型的數(shù)據(jù)、技術(shù)、服務(wù)和運(yùn)營,以及最終落到項(xiàng)目層面,去落實(shí)具體的某個(gè)需求,或者多個(gè)需求。

所以,我首先會(huì)把四大體系按照我們的理解給大家回顧一下。

1. 技術(shù)體系

技術(shù)體系是涵蓋了多云異構(gòu)的計(jì)算存儲(chǔ)引擎,以及相關(guān)的平臺(tái)工具。對于平臺(tái)工具它有幾個(gè)用戶角色:

  1. 面向數(shù)據(jù)運(yùn)維,包括集群運(yùn)維。

  2. 面向數(shù)據(jù)開發(fā),包括ETL。

  3. 面向數(shù)據(jù)管理,比如數(shù)據(jù)治理的具體的管理人員,元數(shù)據(jù)的管理人員,還有數(shù)據(jù)標(biāo)準(zhǔn)的相關(guān)管理人員。

  4. 面向應(yīng)用開發(fā)。IT團(tuán)隊(duì)的應(yīng)用開發(fā)也是數(shù)據(jù)中臺(tái)的一個(gè)用戶,我們后面在服務(wù)體系里邊會(huì)給大家重點(diǎn)闡述。

  5. 面向數(shù)據(jù)分析。因?yàn)槲覀兛吹讲糠值钠髽I(yè)里面把一些BI或者一些大屏也當(dāng)作數(shù)據(jù)中臺(tái)的平臺(tái)工具類。

往下一層就是有關(guān)數(shù)據(jù)如何存儲(chǔ)計(jì)算查詢。我們把它分為四大類:

  1. 離線

  2. 實(shí)時(shí)

  3. 即席

  4. 在線

有關(guān)離線和實(shí)時(shí)其實(shí)大家接觸的比較多。但對于即席計(jì)算,特別是在線計(jì)算,或者在線查詢,為什么在數(shù)據(jù)中臺(tái)里面我們要去考慮規(guī)劃這方面的內(nèi)容?這里需要介紹下服務(wù)體系。

2. 服務(wù)體系

它是補(bǔ)全數(shù)據(jù)應(yīng)用的最后一公里問題。它包括一些對于數(shù)據(jù)服務(wù)的分類,包括典型的標(biāo)簽畫像類,還是基礎(chǔ)數(shù)據(jù)服務(wù)類,還是最終的算法模型相關(guān)的。

所以,你會(huì)發(fā)現(xiàn)圍繞數(shù)據(jù)中臺(tái),不光要去承擔(dān)數(shù)據(jù)的計(jì)算,也還是要去滿足數(shù)據(jù)的查詢的能力,我們往往會(huì)講資產(chǎn)服務(wù)化。

所以,針對不同的場景,無論是面向售后場景,還是千人千面場景,還是面向一個(gè)房地產(chǎn)置業(yè)顧問場景,它對于整個(gè)數(shù)據(jù)的響應(yīng)時(shí)間和查詢性能的一系列要求,是不一樣的。

所以,在整個(gè)數(shù)據(jù)中臺(tái)規(guī)劃里面,不但會(huì)強(qiáng)調(diào)數(shù)據(jù)相關(guān)的存儲(chǔ)計(jì)算,而且會(huì)強(qiáng)調(diào)數(shù)據(jù)的服務(wù)化,以及所依賴的一些在線計(jì)算和即席計(jì)算的能力。

回到服務(wù)體系,服務(wù)體系里面針對標(biāo)簽畫像的基礎(chǔ)和規(guī)則服務(wù),這邊舉兩個(gè)例子。

  • 第一,面向房地產(chǎn)、中介,我拿到一個(gè)客戶,拿到一個(gè)手機(jī)號,我想看到置業(yè)顧問面向訪客的相關(guān)信息,這是一個(gè)非常典型的畫像的訴求。

  • 第二,規(guī)則類,我們會(huì)發(fā)現(xiàn)在客戶的數(shù)據(jù)中臺(tái),或者說營銷的管理平臺(tái)里面,我們會(huì)經(jīng)??吹綄τ谌巳旱木珳?zhǔn)的圈選的一個(gè)訴求。所以,在規(guī)則相關(guān)的服務(wù)里面,這是相對比較常用的。

  • 第三,分析以及相關(guān)的搜索。分析典型的產(chǎn)品就是一些自定義的指標(biāo)體系、平臺(tái),然后在查詢搜索的能力里面,我們就看到,無論是互聯(lián)網(wǎng)典型的搜索平臺(tái),還是個(gè)性化的搜索平臺(tái),以及面向企業(yè)里面內(nèi)部管理,面向合同,面向你的知識庫,或者怎么做快速的搜索。所以,這兩者在整個(gè)選型上,一類可能更多是MPP數(shù)據(jù)庫,另外更多是像Elasticsearch這種類型的引擎。

  • 第四,偏算法類。無論你是批量跑,還是實(shí)時(shí)跑,最終面向整個(gè)應(yīng)用服務(wù)的時(shí)候,一定會(huì)選擇一個(gè)響應(yīng)相對比較高的一個(gè)查詢引擎。比如說,我最終通過落地的方式,用Flink寫的一些算法,直接落到具體的Oracle或者M(jìn)ySQL上面,這個(gè)用戶在直接訪問的時(shí)候我們就可以快速的響應(yīng)。

所以,上面的技術(shù)體系和服務(wù)體系結(jié)合我們來說明,數(shù)據(jù)中臺(tái)在體系規(guī)劃上面不光要考慮數(shù)據(jù)的計(jì)算能力,特別是要考慮數(shù)據(jù)的查詢能力。

3. 數(shù)據(jù)體系

數(shù)據(jù)體系我們更多的描述的是整個(gè)數(shù)據(jù)資產(chǎn)的一個(gè)分層分域。分層其實(shí)市面上有很多理論,包括是分四層,分三層,還是標(biāo)簽層,包括整體數(shù)據(jù)體系相關(guān)的特性。

這里補(bǔ)一個(gè)知識點(diǎn),我們在交流的時(shí)候,大家可能會(huì)認(rèn)為企業(yè)最終業(yè)務(wù)用的標(biāo)簽,或者叫指標(biāo)是不是一定來自于圖上的標(biāo)簽層?回答是否定的。標(biāo)簽層的設(shè)計(jì),它其實(shí)更多是面向通用的一些標(biāo)簽的一個(gè)層面,標(biāo)簽層很多時(shí)候是一個(gè)相對于圍繞對象的一個(gè)跨領(lǐng)域的組合。

所以,在部分客戶里面,我們會(huì)看到那些標(biāo)簽層,他們把它稱之為對象層,或者叫萃取層。所以,一個(gè)觀點(diǎn)就是不要認(rèn)為企業(yè)之間能用的數(shù)據(jù)或者標(biāo)簽是一定來自于標(biāo)簽層,他有可能還是來自于最終的應(yīng)用層,這是一個(gè)點(diǎn)。

第二點(diǎn),我們經(jīng)常講的OneID,或者叫用戶識別,到底在整個(gè)數(shù)據(jù)分層里面,或者叫分域里邊是在哪個(gè)領(lǐng)域?我們更多的建議是在標(biāo)簽層,或者最終的集市層去使用。為什么呢?后面會(huì)有一個(gè)實(shí)例。就是我們認(rèn)為OneID更多的是一個(gè)面向整個(gè)數(shù)據(jù)實(shí)體跨領(lǐng)域的一個(gè)拉通。


所以,在圖里面是什么意思呢?就是我們把全網(wǎng)的用戶認(rèn)為是一個(gè)大池子,首先應(yīng)該縮減成一個(gè)小圈子是什么呢?是可識別的用戶。這個(gè)可識別的用戶意思就是我們可唯一的標(biāo)識一個(gè)自然人。所以,典型的,比如說你的FaceID、無線設(shè)備碼、身份證號、銀行卡號,我們都認(rèn)為是可以統(tǒng)一在標(biāo)識里的。

第二層,再往下說也就是,我不光要標(biāo)識,還能觸達(dá)。什么意思?就是我還得影響你。所以,這個(gè)典型的ID是什么呢?就是手機(jī)號,或者是部分業(yè)務(wù)里面能推送信息的一些業(yè)務(wù)ID,甚至包括你的收貨地址。所以,通過全網(wǎng)的用戶到后面的標(biāo)識,到后面的觸達(dá),最終這些人我一定能找到相應(yīng)的數(shù)據(jù)或者畫像來精準(zhǔn)的進(jìn)行營銷或者推廣。

最早我們對OneID更多的應(yīng)用場景其實(shí)是在銷售領(lǐng)域。所以,大家不要片面的去分析說OneID一定是和用戶中心,或者是在非營銷場景里面。

舉個(gè)例子,比如鐵平可能有兩個(gè)手機(jī)號,一個(gè)手機(jī)號是我自己的,另外一個(gè)手機(jī)號是我給我家里郵寄了一個(gè)快遞。我父親的手機(jī)號就掛在我身上,但是概率不高。

所以,對于OneID的算法模式里面,如果我做得足夠精準(zhǔn),其實(shí)就是我綁一個(gè)手機(jī)號,但是一旦識別概率放寬一點(diǎn),其實(shí)認(rèn)為可能是同一個(gè)家庭,或者同一個(gè)小區(qū),或者同一個(gè)小組的同事,都是有可能的。

但是,如果把這個(gè)模型再擴(kuò)大一點(diǎn),很多時(shí)候就是整個(gè)公司在你的模型里面可能是一個(gè)人,為什么?因?yàn)榇蠹艺w的收貨地址都是一樣的。所以,這個(gè)就是我們當(dāng)初在阿里內(nèi)部做OneID的一個(gè)比較直接能闡明它的用途以及原理的一個(gè)圖。

4. 運(yùn)營體系

有了數(shù)據(jù)體系以后,我們再來看,有了數(shù)據(jù),我從左到右,從基礎(chǔ)的TDM層到數(shù)倉層,到標(biāo)簽層,以及最終的集市我要把它運(yùn)營起來。就是我們始終覺得整個(gè)運(yùn)營視角會(huì)分三大類:

  1. 面向數(shù)據(jù)運(yùn)維的視角,就是我關(guān)心他的運(yùn)行時(shí)長,我關(guān)心它的CPU,它的內(nèi)存。

  2. 數(shù)據(jù)管理角色,就是我到底有多少數(shù)據(jù)對象,都是從哪里來的,我要怎么用,用得怎么樣,這是數(shù)據(jù)管理的視角。

  3. 數(shù)據(jù)應(yīng)用的視角,從一個(gè)應(yīng)用來看,或者應(yīng)用開發(fā)來看,我要讓我的應(yīng)用變得更加智能,我更多關(guān)注的三有什么數(shù)據(jù)可用?

為了整個(gè)數(shù)據(jù)體系完整的生命鏈來看,從左到右我們會(huì)分為運(yùn)維的視角、管理的視角,和最終運(yùn)營的視角。針對不同的視角下面我們就會(huì)關(guān)注不同的KPI,不同的KPI條件下我們就會(huì)關(guān)注不同的使用流程規(guī)范,以及相關(guān)的一些組織能力的建設(shè),到底現(xiàn)階段要不要關(guān)注整個(gè)資產(chǎn)模型,或者相關(guān)的某個(gè)運(yùn)營人員數(shù)據(jù)運(yùn)營能力的培養(yǎng)。

所以,這是我們基于書本上的一些數(shù)據(jù)賬單,或者說是運(yùn)營的視角下,我們重新抽象的一個(gè)新的更容易讓大家理解,通過可控、可持續(xù)的保障體系,圍繞數(shù)據(jù)資產(chǎn)來跟大家解釋一下我們的運(yùn)營體系。

當(dāng)然,在使用當(dāng)中,比如從數(shù)據(jù)管理的角色,我要分析從哪里來,到哪里去,無論你是秒級別的數(shù)據(jù)實(shí)時(shí)分析能力,還是分鐘級別級別的批量數(shù)據(jù)分析能力。都會(huì)考慮一些度量體系的打造,無論是存儲(chǔ)的度量,計(jì)算的度量,還是服務(wù)的度量,都會(huì)轉(zhuǎn)成統(tǒng)一的一個(gè)計(jì)量方式。所以,這是我們對整個(gè)運(yùn)營體系的理解。

你發(fā)現(xiàn)我們?nèi)シ治稣w的技術(shù),以及去服務(wù)服務(wù)體系,以及它核心的建設(shè)內(nèi)容的數(shù)據(jù),以及最終把這個(gè)體系轉(zhuǎn)起來,整體的運(yùn)營體系,這是我們在書本上費(fèi)了很多的篇章,以及項(xiàng)目的實(shí)踐里我們總結(jié)出來的。

所以,一般在項(xiàng)目里面,我們看到很通用的一個(gè)架構(gòu)圖是什么呢?就是這四大體系。整體架構(gòu)的示意圖,從下往上,從最初的低層,無論是云、機(jī)房,還是各類的計(jì)算存儲(chǔ)引擎,以及OneID以后數(shù)據(jù)整體的四層,或者叫三層,以及OneID之間的關(guān)系。再往上走就是面向整個(gè)數(shù)據(jù)的API,各類引擎能力,分的類型可能不同企業(yè)會(huì)不一樣。

然后,圍繞這些數(shù)據(jù)的服務(wù)內(nèi)容,以及數(shù)據(jù)的內(nèi)容,我應(yīng)該用什么樣的平臺(tái)工具進(jìn)行服務(wù)。

所以說,從直接面向用戶的比如自主分析平臺(tái),BI工具,還是一些建模平臺(tái),以及整體在我們右邊的就是面向整個(gè)技術(shù)體系里面的服務(wù)平臺(tái),還是開發(fā)平臺(tái),還是管控平臺(tái),還是數(shù)據(jù)交換平臺(tái),這都是面向不同的IT能力里面不同的角色進(jìn)行平臺(tái)工具建設(shè)。

然后再往上走,通過數(shù)據(jù)門戶,或者統(tǒng)一的數(shù)據(jù)服務(wù)能力,無論三我內(nèi)部用戶,比如說,我自己的員工,還是我的供應(yīng)商用戶,還是我最終面向終端用戶。這是四大體系在我們方案層面面向整體架構(gòu)描述的時(shí)候,我們常常會(huì)用這個(gè)示意圖來跟大家進(jìn)行一些分享。

03 數(shù)據(jù)中臺(tái)建設(shè)框架2.0迭代

上一本書我們寫了將近兩年時(shí)間,兩年時(shí)間里面我們碰到各種各樣的項(xiàng)目,一個(gè)訴求就是關(guān)于數(shù)據(jù)治理

數(shù)據(jù)治理目前包括國家提的一些治理體系,包括國內(nèi)外無論是DCMM相關(guān)的數(shù)據(jù)管理成熟度模型,還是比較成熟的DAMA體系,這是我們接觸到的。然后還有信通院做的數(shù)據(jù)資產(chǎn)白皮書,這是一個(gè)驅(qū)動(dòng)因子。

第二個(gè)驅(qū)動(dòng)因子就是客觀的我們?nèi)プ鰯?shù)據(jù),做分析,做應(yīng)用,放在企業(yè)里面,客觀的一些數(shù)據(jù)真是比較差,特別是一些要么就是沒數(shù)據(jù),要么就是多數(shù)據(jù),兩邊數(shù)據(jù)對不上,要么就是完全的沒法用。所以,這個(gè)就是我們認(rèn)為要把數(shù)據(jù)治理這個(gè)事提上更高的一個(gè)維度來考慮。

第二點(diǎn)就是我們在做項(xiàng)目的時(shí)候大家都會(huì)去考慮,我做數(shù)據(jù)中臺(tái)到底給企業(yè)業(yè)務(wù)的價(jià)值提供什么?然后我在做的特別大的項(xiàng)目里面,數(shù)據(jù)中臺(tái)跟整體的企業(yè)信息化規(guī)劃到底是什么關(guān)系?到底通過什么樣的數(shù)據(jù)復(fù)雜能力加強(qiáng)了我的應(yīng)用,我的應(yīng)用到底是為怎樣的業(yè)務(wù)能力服務(wù)的,你得回答出來,這是另外一個(gè)驅(qū)動(dòng)因子。

第三個(gè)你會(huì)發(fā)現(xiàn),其實(shí)我們最早的一些交付實(shí)施方法,其實(shí)很多有借鑒了一些互聯(lián)網(wǎng)的經(jīng)驗(yàn)。同時(shí)我們對傳統(tǒng)企業(yè)的交付經(jīng)驗(yàn)是在不斷的摸索和完善的。包括我們?nèi)ツ暌采疃葏⑴c了信通院關(guān)于數(shù)據(jù)工程和分析應(yīng)用成熟度的制定,包括評估工作。

結(jié)合種種互聯(lián)網(wǎng)的經(jīng)驗(yàn),傳統(tǒng)的服務(wù)經(jīng)驗(yàn),信通院的一些相關(guān)的碰撞,其實(shí)我們總結(jié)出來了我們數(shù)瀾自己的一個(gè)整體的交付方法。

從三個(gè)方面的驅(qū)動(dòng)因子,我們?nèi)ネ晟屏艘恍┓椒ā?/span>

變化一:關(guān)于數(shù)據(jù)體系

首先,數(shù)據(jù)體系。剛才的分享很多我描述的是有關(guān)數(shù)據(jù)如何分層,以及面向數(shù)據(jù)中臺(tái)如何進(jìn)行分域。所以,在這里我們增加了兩個(gè)新的內(nèi)容,有關(guān)數(shù)據(jù)分類,以及數(shù)據(jù)分布。

什么意思呢?就是很多客戶在實(shí)際落地的時(shí)候,包括做管理的時(shí)候其實(shí)是理不清自己的數(shù)據(jù)家底,這個(gè)數(shù)據(jù)家底包含兩個(gè)方面:

  1. 我核心的數(shù)據(jù)對象我不知道。

  2. 面向整個(gè)業(yè)務(wù)系統(tǒng),到底有哪些數(shù)據(jù)我也不清楚,我該怎么分類,有可能有主數(shù)據(jù),有可能有ERP的數(shù)據(jù),也有CRM等一系列的數(shù)據(jù)。

第二,目前業(yè)務(wù)里面正在用的數(shù)據(jù),或者說想要的數(shù)據(jù)到底哪些是好的,哪些是不好的,我該怎么樣做優(yōu)化,這個(gè)其實(shí)我也不清楚。所以,我們把數(shù)據(jù)分類提到了一個(gè)更高的維度,這也是工業(yè)這塊對于數(shù)據(jù)分析分類的一個(gè)訴求。

另外,有關(guān)數(shù)據(jù)分布。很多企業(yè)又因?yàn)橛?jì)算存儲(chǔ),或者計(jì)算引擎的復(fù)雜性,往往在選擇的時(shí)候會(huì)混合一些訴求,往往有不同存儲(chǔ),包括有Oracle、MySQL,甚至GP,不同的計(jì)算引擎的訴求。其實(shí)從IT管理來講,我需要一張圖看清楚數(shù)據(jù)整體的流向。

所以,我們做部分的項(xiàng)目里面,無論是規(guī)劃類項(xiàng)目,還是實(shí)施類項(xiàng)目,包括數(shù)據(jù)流規(guī)劃,或者數(shù)據(jù)流實(shí)施,或者數(shù)據(jù)流優(yōu)化的一系列的項(xiàng)目進(jìn)行去實(shí)施。

另外,企業(yè)領(lǐng)導(dǎo)或者管理者特別想搞清楚,我的整個(gè)企業(yè)數(shù)據(jù)流向到底是怎么流的,應(yīng)該分析一下。所以,我們把整個(gè)數(shù)據(jù)分布提上了數(shù)據(jù)體系里面的一個(gè)關(guān)鍵性的內(nèi)容。

有關(guān)數(shù)據(jù)分布,我接了什么數(shù)據(jù),沒有接什么數(shù)據(jù),整體數(shù)據(jù)分層怎么劃分,哪些是通過數(shù)據(jù)技術(shù)可以做整體驅(qū)動(dòng)的,哪些是數(shù)據(jù)業(yè)務(wù)我要反推來優(yōu)化整個(gè)標(biāo)簽層,以及最終的指示層,以及我最終用的時(shí)候到底是跨哪些主題域去訪問我的數(shù)據(jù),然后最終跟整個(gè)業(yè)務(wù)域進(jìn)行關(guān)聯(lián)關(guān)系。

當(dāng)然,這只是數(shù)據(jù)分布里面比較High Level的一個(gè)層次,往下到級別,或者到實(shí)施級別其實(shí)有更細(xì)的劃分,這是給大家做一個(gè)示意。

變化二:關(guān)于數(shù)據(jù)業(yè)務(wù)能力

我要回答到底通過什么樣的數(shù)據(jù)業(yè)務(wù)能力來刻畫數(shù)據(jù)產(chǎn)品的價(jià)值圖。以我們以前的原理就是從基座到數(shù)據(jù)怎么變成資產(chǎn),然后資產(chǎn)怎么樣要服務(wù),最終應(yīng)用去結(jié)合。

所以,在數(shù)據(jù)中臺(tái)的一個(gè)范疇,我通過大的新的數(shù)據(jù)應(yīng)用,以及新的跟業(yè)務(wù)應(yīng)用進(jìn)行結(jié)合,讓應(yīng)用變得更加智能,以及我通過應(yīng)用如何來承接整個(gè)價(jià)值鏈里面的一個(gè)業(yè)務(wù)能力。我們后面把它定義為數(shù)據(jù)中臺(tái),其實(shí)是幫助企業(yè)構(gòu)筑了整個(gè)數(shù)據(jù)價(jià)值的一個(gè)釋放通道。

一個(gè)非常典型的制造業(yè)客戶圍繞他的價(jià)值以及支撐的描述,從他整體的市場研發(fā)、采購,包括一些物流,包括一些銷售到服務(wù),以及未來承接整個(gè)價(jià)值,我需要IT做什么?我需要財(cái)務(wù)做什么?我需要人力做什么?以及需要運(yùn)營做什么?

我們目前做項(xiàng)目的時(shí)候一定會(huì)首先去刻畫它的整體的場景藍(lán)圖,我到底通過怎樣的數(shù)據(jù)服務(wù)能力去加強(qiáng)這個(gè)領(lǐng)域的業(yè)務(wù)能力。比如說,在整個(gè)財(cái)務(wù)領(lǐng)域的應(yīng)收應(yīng)付,還是在整個(gè)銷售領(lǐng)域商品展示,還是說供應(yīng)鏈領(lǐng)域相關(guān)的,我要做一個(gè)供應(yīng)商的評估,我們會(huì)把這個(gè)圖刻畫出來,這是我們的一個(gè)思考和改變。

變化三:關(guān)于治理體系

內(nèi)容其實(shí)更多描述的是數(shù)據(jù)治理,因?yàn)槲覀儧]有把整個(gè)面向數(shù)據(jù)團(tuán)隊(duì),面向他的人才,面向他的流程,面向他的架構(gòu)等一系列作為整體的治理內(nèi)容。所以,這里面我們只是把它涵蓋整個(gè)數(shù)據(jù)資產(chǎn),圍繞數(shù)據(jù)資產(chǎn)的治理放到了這里面。

圍繞整個(gè)治理體系,基于場景的一些數(shù)據(jù)生產(chǎn),還是面向基于規(guī)則的一些質(zhì)量管控,以及最終面向以成本作為考核,作為一個(gè)價(jià)值運(yùn)營。所以,你會(huì)發(fā)現(xiàn)很多傳統(tǒng)的數(shù)據(jù)治理的方法,比如面向元數(shù)據(jù)、數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)模型等一系列的,我們其實(shí)更多放在了中間,就是規(guī)則和質(zhì)量把控。

為什么我們會(huì)強(qiáng)調(diào)數(shù)據(jù)場景的數(shù)據(jù)生產(chǎn)?一個(gè)核心點(diǎn),除了數(shù)據(jù)本身交換的技術(shù)需求之外,還有一點(diǎn)就是埋點(diǎn),就是我作為一個(gè)數(shù)據(jù)中臺(tái)的項(xiàng)目,其實(shí)有兩個(gè)非常難的點(diǎn):

  1. 客觀條件下,我如何通過主動(dòng)的方式去獲取一些過程性數(shù)據(jù),如行為類或如何識別可以采集更多的數(shù)據(jù)。

  2. 組織級別里面,明明有數(shù)據(jù),但是他就不給我,我怎么通過另外的方式,或者組織能力去把這個(gè)數(shù)據(jù)拿到過來。做數(shù)據(jù)中臺(tái)或者數(shù)據(jù)產(chǎn)品的時(shí)候有一個(gè)基礎(chǔ)點(diǎn),就是作為一個(gè)項(xiàng)目發(fā)起方,我得有能力去拿到原始數(shù)據(jù)的資產(chǎn),如果連數(shù)據(jù)都拿不到,我的數(shù)據(jù)中臺(tái)、數(shù)倉,或者BI就沒法做了。這是我們認(rèn)為基于產(chǎn)品的數(shù)據(jù)資產(chǎn)非常關(guān)鍵的一個(gè)點(diǎn)。

第三個(gè)點(diǎn)就是我做價(jià)值運(yùn)營,無論做對象的拉通,還是做度量體系,以及相關(guān)的數(shù)據(jù)安全以及數(shù)據(jù)服務(wù),我都可以這個(gè)范疇下面。

所以,在整個(gè)治理體系里面,我們還是會(huì)圍繞三個(gè)不同分類項(xiàng)的一個(gè)核心的大的流程框架去優(yōu)化,及具體的一個(gè)信息化的支撐,包括數(shù)據(jù)治理的工具其實(shí)就在整個(gè)規(guī)則的質(zhì)量管控的下面,我們會(huì)統(tǒng)一去考慮。

所以,這是我們經(jīng)過這么多項(xiàng)目對數(shù)據(jù)治理體系的一個(gè)思考。

變化四:實(shí)施交付方法

最后,交付實(shí)施方法。所以,通過信通院的深度參與,結(jié)合自身的行業(yè)實(shí)踐,包括我們目前對項(xiàng)目的階段,也原來變?yōu)榱?個(gè),包括后來項(xiàng)目實(shí)施模板,包括項(xiàng)目的類別,以及互相之間的一些共享集市具體某個(gè)小的一個(gè)細(xì)分的業(yè)務(wù)活動(dòng),這是我們對交付方法的一個(gè)迭代優(yōu)化。

04 數(shù)據(jù)中臺(tái)建設(shè)框架1.0和2.0

基于以上四個(gè)不同的優(yōu)化,其實(shí)提出了我們新的數(shù)據(jù)中臺(tái)建設(shè)框架的2.0的版本,這個(gè)版本目前還在部分的迭代。

我們在以上三個(gè)大的數(shù)據(jù)因素的前提下,我們從一二三四五整體的建設(shè)框架,演變成在整體還是以數(shù)據(jù)戰(zhàn)略作為整體一個(gè)大的牽引,以及數(shù)據(jù)中臺(tái)的可見、可用、可運(yùn)營的一個(gè)目標(biāo)準(zhǔn)則,為了承接這三個(gè)目標(biāo),我們重點(diǎn)打造數(shù)據(jù)文化,體系框架,以及治理體系,這三類是作為我的一個(gè)能力框架進(jìn)行組建的。

然后,在這三個(gè)能力框架的基礎(chǔ)上,落到具體的項(xiàng)目需求,然后去規(guī)劃具體的業(yè)務(wù)解決方案和IT的解決方案。所以,在整個(gè)項(xiàng)目實(shí)施里面,就去管理包括資源、架構(gòu)、實(shí)施,包括最終的運(yùn)維,我們會(huì)整體的進(jìn)行考慮。

所以,有了整體的框架以后,會(huì)發(fā)現(xiàn)這個(gè)框架里面有一些關(guān)于數(shù)據(jù)治理的內(nèi)容,有關(guān)于一些企業(yè)架構(gòu)的開發(fā)框架,也有保留了整個(gè)互聯(lián)網(wǎng),最早數(shù)據(jù)中臺(tái)的一些思路和想法。

下面這個(gè)示意圖非常通用的一個(gè)框架就是還在大的數(shù)字化轉(zhuǎn)型的一個(gè)牽引下,我去夯實(shí)整個(gè)數(shù)字化轉(zhuǎn)型的基盤,然后再去打造業(yè)務(wù)和數(shù)據(jù)的一體化示意圖

這個(gè)不是業(yè)務(wù)和IT,更多是業(yè)務(wù)和數(shù)據(jù)的一體化模式圖,以及面向整個(gè)企業(yè)完整的擁有的價(jià)值的場景,我去把業(yè)務(wù)領(lǐng)域拉通,以及核心圍繞數(shù)據(jù)技術(shù),整個(gè)數(shù)據(jù)治理,以及為了整個(gè)團(tuán)隊(duì)的能力框架,我怎么把它去打造出來。

所以,你會(huì)發(fā)現(xiàn)這個(gè)階段的描述方式就會(huì)相對比較全面,我們還是以大的目標(biāo)作為牽引,重點(diǎn)去看整個(gè)團(tuán)隊(duì)現(xiàn)階段,以及未來階段應(yīng)該去構(gòu)造的能力框架,然后著重去看到底選用什么樣的數(shù)據(jù)技術(shù),還是選擇什么樣的治理技術(shù),這是我們的一個(gè)數(shù)據(jù)中臺(tái)的建設(shè)方法。

把整體的建設(shè)的案例和框架往下再細(xì)分一點(diǎn),我們還是會(huì)圍繞整體的業(yè)務(wù)藍(lán)圖的調(diào)研,包括一些數(shù)據(jù)字典,以及往下落的時(shí)候核心的會(huì)去抽象場景藍(lán)圖,包括整體的數(shù)據(jù)相關(guān)的內(nèi)容,包括技術(shù)體系服務(wù)體系。

以及圍繞數(shù)據(jù)字典,圍繞數(shù)據(jù)體系,以及業(yè)務(wù)場景藍(lán)圖,我在治理體系里面通常的范圍,包括元數(shù)據(jù)、標(biāo)準(zhǔn)質(zhì)量,以及數(shù)據(jù)安全,最終的成熟度我應(yīng)該怎么來做,又細(xì)分了很多領(lǐng)域。

我們會(huì)把整個(gè)體系框架和最終的治理體系的關(guān)系在項(xiàng)目落地的時(shí)候會(huì)梳理清楚。

最終落地的時(shí)候就是我們可以看這個(gè)治理體系到底是整個(gè)數(shù)據(jù)中臺(tái)的數(shù)據(jù)治理,還是面向整個(gè)業(yè)務(wù)應(yīng)用的數(shù)據(jù)治理,這個(gè)上面我們也可以做一定的階段性的取舍,以及最后的圖示里面,治理體系里面其實(shí)可以回過頭來服務(wù)整體的業(yè)務(wù)應(yīng)用開發(fā),這個(gè)典型的框架就有很多了,包括數(shù)據(jù)字典設(shè)計(jì),包括性能,以及業(yè)務(wù)應(yīng)用的一些開發(fā)。

這就是今天我給大家分享了一下數(shù)據(jù)中臺(tái)整體的建設(shè)框架1.0和2.0的演變,以及我們在這一年多來如何去思考數(shù)據(jù)中臺(tái)建設(shè)的一個(gè)方法,感謝大家!

本站僅提供存儲(chǔ)服務(wù),所有內(nèi)容均由用戶發(fā)布,如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,請點(diǎn)擊舉報(bào)。
打開APP,閱讀全文并永久保存 查看更多類似文章
猜你喜歡
類似文章
★★什么是One Data體系?阿里數(shù)據(jù)中臺(tái)解讀
數(shù)據(jù)中臺(tái)與傳統(tǒng)大數(shù)據(jù)平臺(tái)有什么區(qū)別?終于有人講明白了
SACC2019:愛奇藝的大數(shù)據(jù)中臺(tái)戰(zhàn)略(附演講實(shí)錄) – ITPUB
數(shù)字化轉(zhuǎn)型中,企業(yè)如何做系統(tǒng)設(shè)計(jì)
為什么建設(shè)數(shù)據(jù)中臺(tái),是高校發(fā)展教育信息化的重要戰(zhàn)略選擇?
數(shù)據(jù)中臺(tái)的通用體系架構(gòu)研究
更多類似文章 >>
生活服務(wù)
熱點(diǎn)新聞
分享 收藏 導(dǎo)長圖 關(guān)注 下載文章
綁定賬號成功
后續(xù)可登錄賬號暢享VIP特權(quán)!
如果VIP功能使用有故障,
可點(diǎn)擊這里聯(lián)系客服!

聯(lián)系客服