你知道么?深信服EDS在3節(jié)點標(biāo)準(zhǔn)配置下,塊存儲性能4KB隨機讀達(dá)到34W IOPS,可以媲美傳統(tǒng)中端全閃存存儲,但成本節(jié)省一半!
深信服分布式存儲EDS的塊存儲在3節(jié)點,每節(jié)點配置2塊SSD+6塊HDD的環(huán)境下,跑出了傳統(tǒng)中端SAN存儲29塊SSD的性能參數(shù),4KB隨機讀達(dá)到34W IOPS,可以支持2,000用戶對Oracle數(shù)據(jù)庫進(jìn)行并發(fā)訪問(TPM達(dá)到40萬)。這其中的核心技術(shù)包括分層技術(shù)與智能淘汰算法,以及自適應(yīng)條帶化技術(shù)。
深信服EDS通過自適應(yīng)條帶化技術(shù)將一塊連續(xù)的數(shù)據(jù)切分成很多個小的數(shù)據(jù)塊,然后并發(fā)地存儲到不同物理硬盤上,實現(xiàn)對數(shù)據(jù)進(jìn)行寫入或讀取時可以獲得最大程度上的I/O 并發(fā)能力。在向不同物理硬盤存儲數(shù)據(jù)時,分層技術(shù)與智能淘汰算法派上用場。分層技術(shù)包括三層機制,即內(nèi)存、SSD、HDD,并以此區(qū)分存儲資源性能。再通過智能淘汰算法,將熱點數(shù)據(jù)通過副本的方式保存到SSD高性能存儲資源中,提供高效的讀寫緩存能力。分層技術(shù)與智能淘汰算法充分發(fā)揮了SSD性能,從而大幅提高IOPS。
在塊存儲應(yīng)用場景中,深信服EDS通過自適應(yīng)條帶化技術(shù),再結(jié)合SSD與HDD的完美搭配,可以將隨機讀寫的速度提高3-5倍。通過實際對比測試,深信服EDS采用3節(jié)點的2U存儲設(shè)備,性能就可以媲美傳統(tǒng)中端全閃存存儲,建設(shè)成本至少節(jié)省一半。
你知道么?深信服EDS在3節(jié)點標(biāo)準(zhǔn)配置下,對象存儲可以承載100億個小文件,且100億時性能抖動不超過5%!
100億個小文件相當(dāng)于某個城市1萬個攝像頭,每個攝像頭每天抓拍1萬張照片,累積3個月產(chǎn)生的照片數(shù)量,意味著有幾百億甚至上千億的元數(shù)據(jù),深信服EDS能高效處理如此海量的元數(shù)據(jù),具備極高的性能和承載能力。
為此,深信服分布式存儲EDS創(chuàng)新推出分布式數(shù)據(jù)庫PhxKV。PhxKV具備優(yōu)秀的性能擴(kuò)展能力,EDS通過分布式數(shù)據(jù)庫PhxKV承載元數(shù)據(jù),使得存儲集群在處理海量小文件時具備更高的性能與更優(yōu)秀的性能穩(wěn)定性,性能抖動不超過5%,為EDS在高效處理百億級海量小文件的場景下發(fā)揮了重要作用,已經(jīng)成為行業(yè)領(lǐng)先。
你知道么?深信服EDS在3節(jié)點標(biāo)準(zhǔn)配置下,對象存儲在100億級別小文件規(guī)模下,性能達(dá)到上傳15,000個/s,下載40,000個/s,相比業(yè)內(nèi)對象存儲產(chǎn)品,取得突破!
深信服分布式存儲EDS的對象存儲在100億規(guī)模小文件場景下的上傳下載性能,得益于智能緩存和小對象合并的技術(shù)突破,3節(jié)點性能達(dá)到上傳15,000個/s(相當(dāng)于15,000個攝像頭,每秒各抓拍1張照片同時上傳至存儲系統(tǒng)),下載40,000個/s,與業(yè)內(nèi)其他廠家的對象存儲產(chǎn)品進(jìn)行POC對比,有更好的表現(xiàn)。
隨著非結(jié)構(gòu)化數(shù)據(jù)的爆發(fā)式增長,傳統(tǒng)存儲很容易面臨著文件數(shù)量增長而性能急劇下降的難題。深信服EDS在海量小文件場景下依然保持高效的存取能力:
在文件上傳場景下,EDS通過智能緩存技術(shù)將大文件直接寫入HDD,而將小文件追加寫入SSD中即返回,并在此過程中同時將小文件在線合并為一個EC滿分條,然后按每個條帶(大IO)寫入HDD,極大地提高了文件上傳性能。
在文件下載場景下,EDS利用SSD進(jìn)行文件匯聚,并保留元數(shù)據(jù)在智能緩存中,減少系統(tǒng)頻繁訪問HDD的性能開銷,大幅提升了文件下載性能。
你知道么?深信服EDS在面對磁盤和主機疊加故障時,平臺依舊穩(wěn)定運行,不為所動!
在測試中,深信服分布式存儲EDS經(jīng)受了中國泰爾實驗室長時間的穩(wěn)定性考驗。在3節(jié)點EDS集群中,斷電一臺主機,同時再拔掉一塊剩余節(jié)點的磁盤,模擬極端情況下的故障疊加,EDS依然可以做到故障自動切換,保障平臺穩(wěn)定,這歸功于EDS健全的可靠性機制。
傳統(tǒng)存儲的可靠性一般是通過冗余機制來達(dá)成,比如雙控、RAID、熱備盤等。分布式存儲有多副本、糾刪碼、快照復(fù)制、多數(shù)據(jù)中心等技術(shù),但這還是相對被動的保護(hù)方式。
深信服EDS除了具備傳統(tǒng)被動式保護(hù)機制之外,增加了多重主動防御能力來保障整個平臺的高可靠性。
舉個例子,硬盤屬于易損件,在出故障前會有一段時間的亞健康狀態(tài)。處于亞健康狀態(tài)的硬盤,業(yè)務(wù)依舊可以運行,但體驗、性能比正常要差一些,比如頻繁抖動、時延變高、溫度升高等。
深信服EDS可以通過AI智能檢測系統(tǒng),盡早發(fā)現(xiàn)壽命即將完結(jié)的SSD硬盤或者出現(xiàn)慢盤的硬盤,并第一時間給管理員告警。并且經(jīng)過長時間和大量的錯誤代碼訓(xùn)練,深信服EDS AI智能檢測準(zhǔn)確率高達(dá)98.5%。通過這種主動防御,EDS能做到防患于未然,避免突發(fā)故障造成的業(yè)務(wù)訪問中斷,可靠性完勝傳統(tǒng)存儲。
你知道么?深信服EDS雖然是深信服推出的新品,但實際上深信服在存儲領(lǐng)域已經(jīng)有超過5年的技術(shù)積累和實踐。
2013年深信服存儲就成立獨立研發(fā)部門,為各個產(chǎn)品線提供存儲技術(shù)支撐;2014年開始應(yīng)用于桌面云的數(shù)據(jù)承載;2015年又應(yīng)用于超融合平臺,并在當(dāng)年就完成了第一個Oracle RAC項目的交付。
目前已經(jīng)有大量用戶采用深信服分布式存儲EDS來支撐桌面虛擬化和數(shù)據(jù)中心業(yè)務(wù),其中桌面虛擬化終端用戶超過95萬(截至2019年6月底);超融合用戶超過5,000家,且有超過一半的用戶用于承載數(shù)據(jù)庫等核心業(yè)務(wù)。深信服EDS通過大規(guī)模部署實踐和經(jīng)驗積累,長期穩(wěn)定、可靠承載用戶業(yè)務(wù)數(shù)據(jù),成為政府、教育、制造、廣電、醫(yī)療、金融等行業(yè)用戶信賴的存儲方案。
你知道么?深信服EDS一直在大步跨越,創(chuàng)造驚喜,助力云存儲、海量非結(jié)構(gòu)化數(shù)據(jù)存儲等場景用戶通過“一套架構(gòu)”實現(xiàn)塊、對象、文件和數(shù)據(jù)服務(wù)的有效整合,帶給用戶極簡、可靠、高性能的品質(zhì)存儲體驗。
附(深信服EDS中國泰爾實驗室測試內(nèi)容及結(jié)果):
