你的位置:首頁(yè) > 測(cè)試測(cè)量 > 正文

實(shí)施混合式數(shù)據(jù)分析平臺(tái)的三個(gè)步驟

發(fā)布時(shí)間:2023-09-21 責(zé)任編輯:lina

【導(dǎo)讀】過去八年間,數(shù)據(jù)中臺(tái)及其“統(tǒng)一數(shù)據(jù)、統(tǒng)一服務(wù)、統(tǒng)一身份(One data, one service, one ID)”理念的廣泛采用,推動(dòng)了中心化數(shù)據(jù)平臺(tái)和職責(zé)的普及。2023年Gartner中國(guó)CIO調(diào)研顯示,80%的中國(guó)受訪者依賴中心化IT部門來(lái)提供IT架構(gòu)能力、數(shù)據(jù)、網(wǎng)絡(luò)安全標(biāo)準(zhǔn)和政策。


過去八年間,數(shù)據(jù)中臺(tái)及其“統(tǒng)一數(shù)據(jù)、統(tǒng)一服務(wù)、統(tǒng)一身份(One data, one service, one ID)”理念的廣泛采用,推動(dòng)了中心化數(shù)據(jù)平臺(tái)和職責(zé)的普及。2023年Gartner中國(guó)CIO調(diào)研顯示,80%的中國(guó)受訪者依賴中心化IT部門來(lái)提供IT架構(gòu)能力、數(shù)據(jù)、網(wǎng)絡(luò)安全標(biāo)準(zhǔn)和政策。


然而,中心化IT放大了兩個(gè)問題:IT無(wú)法快速展示數(shù)據(jù)平臺(tái)投資的業(yè)務(wù)價(jià)值,IT對(duì)高速變化的業(yè)務(wù)需求的響應(yīng)較為緩慢、被動(dòng)。關(guān)于是否采用數(shù)據(jù)中臺(tái)/數(shù)據(jù)網(wǎng)格(Data Mesh)的許多爭(zhēng)論,實(shí)際上都指向一個(gè)更為根本的問題:企業(yè)的數(shù)據(jù)分析平臺(tái)和職責(zé),適合怎樣的中心化/去中心化程度。


中國(guó)企業(yè)機(jī)構(gòu)在數(shù)據(jù)驅(qū)動(dòng)轉(zhuǎn)型中很難兼顧的兩個(gè)需求,是數(shù)據(jù)和分析(D&A)的過程敏捷性和成果可靠性。為此,中國(guó)D&A領(lǐng)導(dǎo)者應(yīng)采用混合式分析平臺(tái)及其配套計(jì)劃,成功實(shí)現(xiàn)由數(shù)據(jù)驅(qū)動(dòng)的機(jī)構(gòu)轉(zhuǎn)型。


根據(jù)企業(yè)機(jī)構(gòu)需求確定中心化程度


Gartner定義了數(shù)據(jù)和分析旅程的三個(gè)階段:后企業(yè)數(shù)據(jù)倉(cāng)庫(kù)(EDW)階段、邏輯數(shù)據(jù)倉(cāng)庫(kù)(LDW)階段和數(shù)據(jù)編織階段(見圖1)。


圖1:從企業(yè)數(shù)倉(cāng)向邏輯數(shù)倉(cāng)和數(shù)據(jù)編織的演變

 實(shí)施混合式數(shù)據(jù)分析平臺(tái)的三個(gè)步驟


與北美和歐洲相比,亞太和中國(guó)由于存在更大的行業(yè)差距、地域差距和其他影響因素,企業(yè)機(jī)構(gòu)的數(shù)據(jù)分析成熟度差異更大。除數(shù)據(jù)分析成熟度之外,企業(yè)業(yè)務(wù)組合的多元化程度、行業(yè)競(jìng)爭(zhēng)激烈程度等很多因素也影響著數(shù)據(jù)和分析職責(zé)的中心化程度。


D&A領(lǐng)導(dǎo)者應(yīng)全面評(píng)估企業(yè)機(jī)構(gòu)的數(shù)據(jù)分析成熟度和相關(guān)其他因素,確定最佳適用原則以及優(yōu)先度最高的數(shù)據(jù)分析任務(wù)。


運(yùn)用Gartner雙模概念進(jìn)化數(shù)據(jù)分析平臺(tái)


除了涉及混合數(shù)據(jù)分析原則外,另一個(gè)關(guān)鍵而困難的任務(wù)是在細(xì)粒度層面上實(shí)現(xiàn)業(yè)務(wù)線和IT之間各項(xiàng)技術(shù)權(quán)責(zé)的最佳平衡。“業(yè)務(wù)部門對(duì)數(shù)據(jù)治理項(xiàng)目的參與度有限”和“分析交付成果等待時(shí)間過長(zhǎng)、業(yè)務(wù)滿意度低”等負(fù)面評(píng)價(jià),是平衡失調(diào)的典型跡象。


IT擁有的企業(yè)數(shù)據(jù)倉(cāng)庫(kù)/湖和業(yè)務(wù)線擁有的數(shù)據(jù)集市/沙箱,并不互相排斥。兩類平臺(tái)有各自適用的數(shù)據(jù)分析用例,可通過Gartner雙模概念進(jìn)行區(qū)分。


雙模IT旨在為兩種IT工作負(fù)載實(shí)施不同的交付策略:


? 模式1:傳統(tǒng)模式,強(qiáng)調(diào)可靠性、安全性和準(zhǔn)確性,通常是中心化的。

? 模式2:探索模式,強(qiáng)調(diào)敏捷性和時(shí)效性,通常是去中心化的。


在數(shù)據(jù)和分析領(lǐng)域,模式1用例優(yōu)先考慮數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全和數(shù)據(jù)可復(fù)用性,而不是敏捷性。這些用例應(yīng)在中心化數(shù)據(jù)分析平臺(tái)上交付,遵循嚴(yán)格的數(shù)據(jù)治理規(guī)則以及由中心化IT部門主導(dǎo)的詳細(xì)測(cè)試流程。


模式2用例具有探索性和時(shí)效性,其洞察提供時(shí)效性優(yōu)先于數(shù)據(jù)治理標(biāo)準(zhǔn)。應(yīng)用/結(jié)果可在原型開發(fā)環(huán)境中交付,使用戶能在有限的IT參與度下靈活完成探索和調(diào)查。根據(jù)數(shù)據(jù)敏感度和隱私級(jí)別,部分新的源數(shù)據(jù)可繞過數(shù)據(jù)倉(cāng)庫(kù)/數(shù)據(jù)湖,直接采集到目標(biāo)應(yīng)用或數(shù)據(jù)集市中。


持續(xù)調(diào)整數(shù)據(jù)分析角色和職責(zé)分配


隨著技術(shù)架構(gòu)的發(fā)展,不同數(shù)據(jù)分析角色的責(zé)任也應(yīng)不斷變化,以適應(yīng)各類用例的不同價(jià)值偏好。在復(fù)雜的用例中,數(shù)據(jù)工程、數(shù)據(jù)治理、報(bào)表/應(yīng)用交付等端到端任務(wù)通常由不同的部門完成。2023年Gartner中國(guó)CIO調(diào)研顯示,對(duì)于“制定企業(yè)數(shù)字變革愿景時(shí)面臨的主要困難”這一問題,得票最高的四項(xiàng)有三項(xiàng)與跨部門協(xié)調(diào)有關(guān),這反映了IT和業(yè)務(wù)部門之間的責(zé)任不匹配。


原則上,與數(shù)據(jù)基礎(chǔ)設(shè)施關(guān)聯(lián)較為緊密的任務(wù),如數(shù)據(jù)獲取和元數(shù)據(jù)變更協(xié)調(diào),應(yīng)由IT集中管理。與洞察消費(fèi)者關(guān)聯(lián)較為緊密的任務(wù),如BI報(bào)表交付和自助服務(wù)分析,則應(yīng)更多地由業(yè)務(wù)端參與或由業(yè)務(wù)領(lǐng)導(dǎo)者負(fù)責(zé)。


用例責(zé)任分配不當(dāng),會(huì)造成預(yù)期價(jià)值偏好與現(xiàn)實(shí)情況不匹配,進(jìn)而導(dǎo)致業(yè)務(wù)價(jià)值稀釋。D&A領(lǐng)導(dǎo)者應(yīng)不斷調(diào)整責(zé)任歸屬,使之符合企業(yè)機(jī)構(gòu)的數(shù)據(jù)分析成熟度、數(shù)據(jù)分析平臺(tái)發(fā)展進(jìn)度以及新的數(shù)據(jù)分析用例模式。

   

免責(zé)聲明:本文為轉(zhuǎn)載文章,轉(zhuǎn)載此文目的在于傳遞更多信息,版權(quán)歸原作者所有。本文所用視頻、圖片、文字如涉及作品版權(quán)問題,請(qǐng)聯(lián)系小編進(jìn)行處理。


推薦閱讀:

第102屆中國(guó)電子展—眾多集成電路優(yōu)質(zhì)企業(yè)“大放異彩”

模擬開關(guān)用途和基本操作

如何驗(yàn)證高壓放大器的性能好壞呢

使用電荷泵驅(qū)動(dòng)外部負(fù)載

適用于熱插拔應(yīng)用的具有導(dǎo)通電阻的高效 MOSFET

特別推薦
技術(shù)文章更多>>
技術(shù)白皮書下載更多>>
熱門搜索
?

關(guān)閉

?

關(guān)閉