2017年數(shù)據(jù)管理技術成熟度曲線
其中兩項技術特別引人關注,它們揭示了云計算(cloud computing)對于數(shù)據(jù)管理領域所帶來的影響力。
由于整個Hadoop堆棧的復雜性與可用性導致許多企業(yè)重新考慮是否將其納入基礎架構(gòu)規(guī)劃中,因此,Hadoop被認為在到達“生產(chǎn)成熟期”之前已經(jīng)過時。
相反,各企業(yè)機構(gòu)正在著眼于日漸具有競爭力且便捷、按需定價的云端選項,以及量身定制的數(shù)據(jù)處理選項。
作為云主導趨勢的一部分,面向云的對象存儲SQL接口已處于“技術萌芽期”。
Gartner副總裁兼杰出分析師Feinberg認為:“我們預計這些接口代表著云數(shù)據(jù)庫平臺即服務(PaaS)的未來,并將在2至5年內(nèi)達到‘成熟期’,這是因為它們是該領域內(nèi)大部分云提供商及產(chǎn)品的重心。此類接口可以讓各企業(yè)機構(gòu)運用熟悉的SQL語法與云端存儲的數(shù)據(jù)進行互動。對象存儲非常適用于存儲大量多結(jié)構(gòu)數(shù)據(jù),而這正是數(shù)據(jù)湖(data lake)的典型特征。”
在“2017年數(shù)據(jù)管理技術成熟度曲線”所列的其它35項技術中,有4項被認為具有變革性。2項技術——事件流處理(ESP)與內(nèi)存計算數(shù)據(jù)庫管理系統(tǒng)(IMDBMS)預計將在2至5年內(nèi)達到“生產(chǎn)成熟期”,而區(qū)塊鏈(blockchain)與分布式賬本(distributed ledgers)達到“生產(chǎn)成熟期”預計仍需要5至10年。
隨著數(shù)據(jù)在多個系統(tǒng)間更加離散存儲,各企業(yè)機構(gòu)不得不應對日益復雜的生態(tài)系統(tǒng)與數(shù)字化業(yè)務需求。Gartner發(fā)布的數(shù)據(jù)管理技術成熟度曲線*(Hype Cycle for Data Management)旨在幫助首席信息官(CIO)、首席數(shù)據(jù)官(CDO)及其它數(shù)據(jù)與分析高級管理人員,了解他們正在評估的數(shù)據(jù)管理技術的成熟度,以便在企業(yè)機構(gòu)的內(nèi)部構(gòu)建內(nèi)聚性數(shù)據(jù)管理生態(tài)系統(tǒng)。
Gartner副總裁兼杰出分析師Donald Feinberg表示:“在邁向數(shù)字化業(yè)務的過程中,數(shù)據(jù)管理仍會處在核心地位。隨著組織架構(gòu)的要求發(fā)生變化以及對相關技術的需求逐漸加大,技術成熟度曲線中所強調(diào)的多項技術的成熟度與功能將迅猛發(fā)展。近些年來,許多新技術不斷被納入技術成熟度曲線,其中包括:內(nèi)存(in-memory)、云計算(cloud)、數(shù)據(jù)虛擬化(data virtualization)、高級數(shù)據(jù)分析(advanced analytics)、數(shù)據(jù)即服務(data as a service)、機器學習(machine learning)、圖形(graph)、非關系型數(shù)據(jù)庫(non-relational)和Hadoop?!?/p>
事件流處理(Event Stream Processing):事件流處理是數(shù)字化業(yè)務、算法業(yè)務(algorithmic business)與智能商業(yè)運作(intelligent business operation)的主要支持性技術之一。包括分布式流計算平臺(DSCP)與事件處理平臺(EPP)在內(nèi)的事件流處理技術正在快速成熟。通過提供可能被忽略的云信息,事件流處理軟件的流分析功能提高了決策質(zhì)量。
運營性內(nèi)存計算數(shù)據(jù)庫管理系統(tǒng)(Operational In-Memory DBMS):雖然支持運營性內(nèi)存計算數(shù)據(jù)庫管理系統(tǒng)(IMDBMS)技術的基礎架構(gòu)仍然比較昂貴,但該項技術正在變得愈加成熟和普及。限制該技術增長的另一個因素是如何滿足聯(lián)機交易SLA所需要的高可用性。盡管如此,通過將數(shù)據(jù)交易速度從100倍提升至1000倍,面向交易的運營性內(nèi)存計算數(shù)據(jù)庫管理系統(tǒng)仍有望對商業(yè)價值產(chǎn)生重大影響。
區(qū)塊鏈(Blockchain):雖然各企業(yè)機構(gòu)因為可擴展性、風險及治理問題而對公共(低權限)分布式賬本概念的發(fā)展前景依然持謹慎態(tài)度,但包括區(qū)塊鏈在內(nèi)的公共分布式賬本將保持高熱度。大部分商業(yè)使用案例尚未得到驗證,且比特幣仍處于極大的價格波動中。有關分布式賬本的預想技術與商業(yè)挑戰(zhàn)將得到克服;短期內(nèi),各企業(yè)機構(gòu)極可能通過共享信息及基礎架構(gòu)而利用分布式賬本提高運營效率。長期來看,Gartner預計隨著可編程經(jīng)濟的發(fā)展和賬本促進新生態(tài)系統(tǒng)的貨幣化,整個行業(yè)與商業(yè)活動將發(fā)生徹底變革。
分布式賬本(Distributed Ledgers):雖然針對更多標準與企業(yè)級功能的需求正經(jīng)歷緩慢演化,但分布式賬本仍無法應用于大規(guī)模的關鍵任務情景。相比現(xiàn)有成熟技術,其應用價值也尚不清晰,這對該技術的廣泛普及造成了一定影響。由于有望改變行業(yè)運營模式并克服困擾公共賬本的某些可擴展性、風險管理及治理問題,私有分布式賬本概念正得到推動。但是,與區(qū)塊鏈一樣,許多商業(yè)使用案例目前仍未得到驗證。