新數(shù)據(jù)時(shí)代元年,海量、多元、實(shí)時(shí)、多云的新數(shù)據(jù)特征

通過(guò)對(duì)金融、交通、電信、能源、醫(yī)療等行業(yè)的研究,報(bào)告指出新數(shù)據(jù)時(shí)代下表現(xiàn)出的新數(shù)據(jù)特征:數(shù)據(jù)海量增長(zhǎng),到2025年全球新創(chuàng)建的數(shù)據(jù)將達(dá)到175ZB;企業(yè)對(duì)實(shí)時(shí)數(shù)據(jù)需求增加,到2023年實(shí)時(shí)數(shù)據(jù)占全球數(shù)據(jù)圈24.5%的份額;未來(lái)全球?qū)⒂谐^(guò)70%的企業(yè)選擇多云部署模式,到2023年42.4%的企業(yè)將采用邊緣+核心的組合架構(gòu),核心數(shù)據(jù)中心的數(shù)據(jù)存儲(chǔ)容量占比將超過(guò)50%。

首先,海量、多元和非結(jié)構(gòu)化成新數(shù)據(jù)時(shí)代常態(tài)。報(bào)告顯示,2019年,全球存儲(chǔ)新裝機(jī)容量從EB級(jí)達(dá)到ZB級(jí),2025年全球新創(chuàng)建的數(shù)據(jù)將達(dá)到175ZB。數(shù)據(jù)環(huán)境多樣、復(fù)雜,數(shù)據(jù)從單一內(nèi)部小數(shù)據(jù)形態(tài)向多元?jiǎng)討B(tài)大數(shù)據(jù)發(fā)展,大量文本、圖片、視頻等非結(jié)構(gòu)化數(shù)據(jù)被產(chǎn)生和存儲(chǔ)。例如,在智慧城市場(chǎng)景中,中國(guó)的攝像頭保有量已經(jīng)達(dá)到億級(jí),加之交通系統(tǒng)往往會(huì)存儲(chǔ)相當(dāng)長(zhǎng)時(shí)期內(nèi)的歷史數(shù)據(jù)用于查證和回溯,由此產(chǎn)生的海量新數(shù)據(jù)給存儲(chǔ)系統(tǒng)帶來(lái)壓力。

其次,數(shù)據(jù)的實(shí)時(shí)性需求變得更迫切。隨著互聯(lián)網(wǎng)、物聯(lián)網(wǎng)以及人工智能等技術(shù)在各行業(yè)的不斷滲透,企業(yè)對(duì)于數(shù)據(jù)實(shí)時(shí)性的需求日益增加。報(bào)告顯示,到2023年,實(shí)時(shí)數(shù)據(jù)將占全球數(shù)據(jù)圈24.5%的份額。金融的風(fēng)險(xiǎn)評(píng)估、交通的自動(dòng)駕駛、運(yùn)營(yíng)商的智能網(wǎng)絡(luò)等許多場(chǎng)景,都需要依賴快速實(shí)時(shí)的數(shù)據(jù)采集、存儲(chǔ)和分析得以實(shí)現(xiàn)。

再次,基礎(chǔ)架構(gòu)向云-邊-端演進(jìn),重要的數(shù)據(jù)存儲(chǔ)位置依然在核心。未來(lái)兩年,全球?qū)⒂谐^(guò)70%的企業(yè)選擇多云部署模式。2023年,將有42.4%的企業(yè)采用邊緣+核心的組合架構(gòu)建立和運(yùn)行數(shù)據(jù)庫(kù),設(shè)備架構(gòu)從云+端的兩級(jí)架構(gòu)向云-邊-端三級(jí)架構(gòu)演進(jìn)迭代。雖然數(shù)據(jù)的產(chǎn)生更多來(lái)自端側(cè)和邊緣,但重要的數(shù)據(jù)存儲(chǔ)位置依然在核心,到2023年核心數(shù)據(jù)中心的數(shù)據(jù)存儲(chǔ)容量占比將超過(guò)50%。由于現(xiàn)代數(shù)據(jù)中心的復(fù)雜性,數(shù)百個(gè)應(yīng)用程序在數(shù)百臺(tái)服務(wù)器上運(yùn)行,同時(shí)還要運(yùn)行數(shù)十種監(jiān)測(cè)和管理工具,管理一直是云部署和云管理的重中之重。

存儲(chǔ):分布式存儲(chǔ)是新趨勢(shì),閃存陣列是企業(yè)存儲(chǔ)加速首選

新數(shù)據(jù)時(shí)代數(shù)據(jù)呈現(xiàn)出海量、多元、實(shí)時(shí)、多云的特征。對(duì)于數(shù)字化轉(zhuǎn)型中的企業(yè)來(lái)說(shuō),在數(shù)據(jù)存儲(chǔ)的極致容量、極速性能、極簡(jiǎn)架構(gòu)、極易管理等方面提出要求。報(bào)告建議投資閃存陣列以提升存儲(chǔ)性能,以滿足實(shí)時(shí)數(shù)據(jù)處理對(duì)百萬(wàn)級(jí)IOPS、亞毫秒級(jí)時(shí)延的需求;利用分布式存儲(chǔ)架構(gòu)在性能和容量擴(kuò)展方面的優(yōu)勢(shì),解決大規(guī)模、高并發(fā)場(chǎng)景下對(duì)存儲(chǔ)的挑戰(zhàn)。

閃存陣列憑借其性能和穩(wěn)定性,成為企業(yè)存儲(chǔ)加速的首選方案。目前,閃存陣列已經(jīng)逐漸普及,新端口的固態(tài)硬盤、NVMe網(wǎng)絡(luò)架構(gòu),使存儲(chǔ)系統(tǒng)的性能有了大幅提升。未來(lái),隨著新技術(shù)帶來(lái)的存儲(chǔ)效率大幅提升,將有越來(lái)越多的企業(yè)選擇閃存陣列來(lái)滿足數(shù)據(jù)實(shí)時(shí)性應(yīng)用需求。以山東高速ETC繳費(fèi)系統(tǒng)為例,在其數(shù)千公里的高速公路上分布著多個(gè)路段信息分中心、收費(fèi)站、收費(fèi)車道、ETC客服網(wǎng)點(diǎn),基于浪潮全閃存儲(chǔ)系統(tǒng)實(shí)現(xiàn)0.1毫秒通行ETC,日均清分業(yè)務(wù)處理量達(dá)到百萬(wàn)筆。

高效、易于擴(kuò)展的分布式平臺(tái)引領(lǐng)存儲(chǔ)架構(gòu)新趨勢(shì)。分布式存儲(chǔ)系統(tǒng)采用可擴(kuò)展的架構(gòu),不僅能提高存儲(chǔ)的效率和數(shù)據(jù)的安全性,還可以進(jìn)行性能和容量的橫向擴(kuò)展,解決大規(guī)模、高并發(fā)場(chǎng)景下的存儲(chǔ)訪問(wèn)問(wèn)題。隨著5G、物聯(lián)網(wǎng)和人工智能的快速發(fā)展,企業(yè)對(duì)于分布式系統(tǒng)的需求將持續(xù)增加,分布式存儲(chǔ)成為多云環(huán)境的首選平臺(tái)。到2023年,40%的存儲(chǔ)系統(tǒng)將是分布式存儲(chǔ)架構(gòu)。以成都三環(huán)路為例,浪潮分布式存儲(chǔ)支撐了其超過(guò)6000路道路端口的視頻流,每天1億文件寫(xiě)入和10億次查詢,智能交通管理效率提升500%。

多云環(huán)境下,提升存儲(chǔ)的可用性和管理能力。面對(duì)數(shù)據(jù)爆炸,存儲(chǔ)必須隨需應(yīng)變,軟件定義、智能化、多云間數(shù)據(jù)流動(dòng)是存儲(chǔ)未來(lái)的主流發(fā)展方向。比如浪潮以創(chuàng)新架構(gòu)構(gòu)建分布式存儲(chǔ),在一套系統(tǒng)內(nèi)提供文件、塊、對(duì)象、大數(shù)據(jù)等多種存儲(chǔ)服務(wù),支持Manila、Cinder、Nova、Swift接口對(duì)接,并通過(guò)智能運(yùn)維軟件管理多種設(shè)備,簡(jiǎn)化多云設(shè)備管理。在中國(guó)廣電國(guó)網(wǎng)云平臺(tái)中,浪潮存儲(chǔ)平臺(tái)打通底層分布式存儲(chǔ)、虛擬化、OpenStack、云管平臺(tái),外部實(shí)現(xiàn)與網(wǎng)絡(luò)SDN、云安全等平臺(tái)對(duì)接,實(shí)現(xiàn)廣電國(guó)網(wǎng)的三地互聯(lián)互通和大規(guī)模業(yè)務(wù)支撐目標(biāo)。

告別人工干預(yù),存儲(chǔ)將進(jìn)入智慧運(yùn)維時(shí)代。人工智能技術(shù)無(wú)處不在,將快速融入存儲(chǔ)系統(tǒng)的發(fā)展,并在存儲(chǔ)容量、性能、硬盤故障預(yù)測(cè)方面起到關(guān)鍵作用。在清華大學(xué)“中國(guó)腦計(jì)劃”項(xiàng)目中,浪潮基于智能統(tǒng)一存儲(chǔ)管理平臺(tái)InView,對(duì)存儲(chǔ)系統(tǒng)進(jìn)行集中管理、智能監(jiān)測(cè)和故障預(yù)測(cè)報(bào)警,保障每秒51億像素、72小時(shí)連續(xù)寫(xiě)入不丟幀的腦科研項(xiàng)目順利進(jìn)行。

報(bào)告還針對(duì)新數(shù)據(jù)時(shí)代的存儲(chǔ)未來(lái)發(fā)展提出了具體建議,基于云-邊-端多元部署的趨勢(shì)發(fā)展,企業(yè)需要制定從端到邊再到核心的完整數(shù)據(jù)管理解決方案。針對(duì)多云環(huán)境的必然趨勢(shì),企業(yè)必須提升多云環(huán)境下的數(shù)據(jù)管理能力,同時(shí)持續(xù)關(guān)注NVMe、內(nèi)存SCM等技術(shù)更新及AI技術(shù)應(yīng)用。

報(bào)告原文,PC端下載可點(diǎn)擊地址1,移動(dòng)端下載可點(diǎn)擊地址2,或掃描下方二維碼:

分享到

zhangnn

相關(guān)推薦