由于能夠完全理解數(shù)據(jù)如何從一個(gè)地方流向另一個(gè)地方,數(shù)據(jù)沿襲使業(yè)務(wù)流程變得更加高效和集中。
2021年終于到了,企業(yè)正根據(jù)過(guò)去一年的經(jīng)驗(yàn)教訓(xùn),制定自己的戰(zhàn)略。雖然洞察有助于為未來(lái)的計(jì)劃提供信息,比如預(yù)算和工作的位置,但每個(gè)公司都應(yīng)該擁有一個(gè)必要的工具。如果你讀過(guò)書(shū)名,你不應(yīng)該感到驚訝。我們說(shuō)的是自動(dòng)化數(shù)據(jù)沿襲。由于能夠完全理解數(shù)據(jù)如何從一個(gè)地方流向另一個(gè)地方,數(shù)據(jù)沿襲使業(yè)務(wù)流程變得更加高效和集中。
數(shù)據(jù)沿襲就像石油
在題為“2021年數(shù)據(jù)沿襲的基本指南”的網(wǎng)絡(luò)研討會(huì)上,數(shù)據(jù)管理和數(shù)據(jù)治理領(lǐng)域的專家馬爾科姆?奇肖姆(Malcolm Chisholm)分享了他對(duì)來(lái)年的預(yù)測(cè)。作為演講的開(kāi)始,他將數(shù)據(jù)沿襲路徑與煉油廠進(jìn)行了比較(這是我們最喜歡的類比之一)。如果我們不了解流經(jīng)管道的是什么,我們就無(wú)法確定油有多熱,它的壓力水平,甚至它將流向何處。數(shù)據(jù)沿襲被認(rèn)為是相同的。如果公司不能準(zhǔn)確掌握系統(tǒng)間流動(dòng)的數(shù)據(jù),他們將無(wú)法解釋最終出現(xiàn)在報(bào)告中的數(shù)字。Malcolm Chisholm指出,“數(shù)據(jù)沿襲不僅僅是兩個(gè)盒子之間的箭頭,它要復(fù)雜得多。”這個(gè)過(guò)程需要了解公司已經(jīng)獲得的數(shù)據(jù),了解數(shù)據(jù)是如何存儲(chǔ)的,或者在存儲(chǔ)過(guò)程中遇到的任何障礙。此外,ETL工具不僅僅是數(shù)據(jù)移動(dòng),它們內(nèi)部實(shí)際上有邏輯發(fā)生。通過(guò)這個(gè)組件,您可以全面了解數(shù)據(jù)沿襲。
數(shù)據(jù)沿襲的類型和對(duì)公司的好處
說(shuō)到數(shù)據(jù)沿襲,主要有兩種類型:水平和垂直。水平是表示系統(tǒng)間流動(dòng)的更高級(jí)別。通過(guò)利用水平數(shù)據(jù)沿襲,您可以查看整個(gè)圖片,但唯一的問(wèn)題是細(xì)節(jié)僅限于此。如果您想要更專業(yè)的視圖,可以使用垂直數(shù)據(jù)沿襲。這是向下鉆取的,因此您可以確切地看到正在發(fā)生的事情和具體的轉(zhuǎn)換。數(shù)據(jù)沿襲需要滿足這兩個(gè)級(jí)別,因此我們應(yīng)該同時(shí)利用這兩個(gè)視圖。對(duì)于數(shù)據(jù)沿襲,我們必須跟蹤移動(dòng)并考慮邏輯。
簡(jiǎn)而言之,數(shù)據(jù)沿襲取代了人員和部門(mén)之間共享信息的方式。此外,數(shù)據(jù)沿襲路徑表示業(yè)務(wù)流程,因?yàn)樘幚戆l(fā)生在沿襲本身中。隨著全球競(jìng)爭(zhēng)的加劇,數(shù)據(jù)沿襲路徑可以幫助指導(dǎo)公司的戰(zhàn)略。如果公司完全了解如何處理整個(gè)數(shù)據(jù)管道,它就可以正確地處理數(shù)據(jù)治理、數(shù)據(jù)質(zhì)量和數(shù)據(jù)清理。
Chisholm認(rèn)為,數(shù)據(jù)沿襲在今天是必不可少的,因?yàn)樗兄谄髽I(yè)從戰(zhàn)略上解決圍繞重組和重新設(shè)計(jì)流程以提高效率的問(wèn)題。
2021年及以后數(shù)據(jù)沿襲的使用
公司利用數(shù)據(jù)沿襲的第一種方式是在計(jì)劃遷移到云時(shí)。我們將在2021年看到的一個(gè)重大轉(zhuǎn)變是,企業(yè)將開(kāi)始將其信息從數(shù)據(jù)中心或“內(nèi)部部署”轉(zhuǎn)移到云中。為了實(shí)現(xiàn)平穩(wěn)的遷移,必須正確地復(fù)制數(shù)據(jù)流。這意味著公司需要清楚地了解其現(xiàn)有的數(shù)據(jù)沿襲。為了為干凈的遷移做好準(zhǔn)備,企業(yè)必須對(duì)數(shù)據(jù)進(jìn)行篩選,找出死胡同,或者換句話說(shuō),確認(rèn)“什么占據(jù)了死胡同”
當(dāng)BI團(tuán)隊(duì)希望在其報(bào)告中實(shí)現(xiàn)完整性保證時(shí),他們可以求助于數(shù)據(jù)沿襲。他們必須能夠確認(rèn)自己的數(shù)字的準(zhǔn)確性,這樣才能為企業(yè)提供一個(gè)令人信服的解釋,說(shuō)明報(bào)告中發(fā)生了什么。此外,這需要在合理的時(shí)間內(nèi)完成。使用數(shù)據(jù)沿襲,他們可以檢查上游并了解錯(cuò)誤所在以及它影響了哪些數(shù)據(jù)集。由于數(shù)據(jù)沿襲將各種數(shù)據(jù)流組合到一個(gè)平臺(tái)中,BI專業(yè)人員可以確定流程中的某些問(wèn)題或障礙。這有助于解釋差異,增強(qiáng)洞察力,并提供具體證據(jù)支持他們的報(bào)告。
按照與保證相同的思路,可以通過(guò)自動(dòng)化的數(shù)據(jù)沿襲輕松實(shí)現(xiàn)影響分析。Chisholm在沒(méi)有理解其含義的情況下,深思熟慮地說(shuō):“您進(jìn)行更改,然后等待是否有人尖叫。”數(shù)據(jù)沿襲允許您在進(jìn)行任何更改之前了解下游技術(shù)對(duì)象將受到哪些影響。同樣的想法也適用于破損的ETL。一旦您在上游進(jìn)行了更改并且ETL中斷,數(shù)據(jù)沿襲就可以幫助您調(diào)查和辨別到底發(fā)生了什么。一旦您了解了問(wèn)題所在的位置,就可以確定如何解決它。
為了保持法規(guī)遵從性,數(shù)據(jù)沿襲是必要的。無(wú)論一家公司必須遵守GDPR、CPRA、BCBS-239,還是僅僅為了獲得對(duì)其PII的控制權(quán),它們都必須依賴于準(zhǔn)確的數(shù)據(jù)沿襲。當(dāng)公司清楚地了解自己的數(shù)據(jù)流時(shí),就可以看到涉及哪些流程。這使他們能夠以更有意義的方式跟蹤他們的數(shù)據(jù),以實(shí)現(xiàn)數(shù)據(jù)治理。說(shuō)到PII,這一點(diǎn)尤為重要。公司必須了解每個(gè)新數(shù)據(jù)源的來(lái)源,以便對(duì)其進(jìn)行相應(yīng)的分類和識(shí)別。您還可以看到哪些報(bào)表正在接收這些數(shù)據(jù),這對(duì)于法規(guī)遵從性至關(guān)重要。數(shù)據(jù)沿襲確保所有信息正確保存,沒(méi)有任何差異。
Chisholm總結(jié)了自動(dòng)化數(shù)據(jù)沿襲的主要優(yōu)勢(shì),從而結(jié)束了這次網(wǎng)絡(luò)研討會(huì)。通過(guò)自動(dòng)化,公司可以更好地?cái)U(kuò)展和快速理解問(wèn)題。這將導(dǎo)致更詳細(xì)的復(fù)雜性和準(zhǔn)確性。由于數(shù)據(jù)沿襲不是簡(jiǎn)單的數(shù)據(jù)移動(dòng),因此此工具允許企業(yè)充分理解其數(shù)據(jù)流以及更改或遷移將產(chǎn)生的任何影響。