當(dāng)前業(yè)界處于數(shù)據(jù)大爆炸的時代,數(shù)據(jù)產(chǎn)生量越來越多,數(shù)據(jù)存儲占用很多應(yīng)用資源,也在消耗著諸多能源。如何讓存儲做到綠色環(huán)保?這是存儲行業(yè)需要考慮的問題。
近幾年大數(shù)據(jù)、互聯(lián)網(wǎng)+、以及云計算領(lǐng)域飛速發(fā)展,國家相應(yīng)出臺了很多針對性的政策。各個企業(yè)在自己內(nèi)部構(gòu)建私有云,還有混合云。數(shù)據(jù)作為云計算根基,需要更好的方式來保存。其中,軟件定義存儲和超融合存儲得到了大家的廣泛關(guān)注,凱翔科技就是其中重要的一員。
在數(shù)據(jù)中心里,計算資源和存儲資源消耗能源排在前兩位,數(shù)據(jù)產(chǎn)生后如何安全存儲,方便日后查詢、分析,這是用戶對于存儲的首要要求。隨著數(shù)據(jù)量的不斷增長,存儲的穩(wěn)定性是用戶更為關(guān)注的,數(shù)據(jù)量夠大,硬件資源直線攀升,存儲集群復(fù)雜度越來越高。無論是硬盤、機器還是數(shù)據(jù)中心節(jié)點出現(xiàn)故障,都要保證業(yè)務(wù)的完整性。
用戶存儲需求:安全、穩(wěn)定、高效、低成本
數(shù)據(jù)的真正價值最主要的是被用戶訪問、分析,對于存儲需更加高效,主要體現(xiàn)在對于存儲的讀、寫和分析層面,高存儲、低延遲是標(biāo)尺。為用戶提供業(yè)務(wù)數(shù)據(jù)時,用戶更關(guān)注數(shù)據(jù)成本,包括軟件定義存儲的橫向擴展能力與增量,用戶希望數(shù)據(jù)保存更久,來分析后期業(yè)務(wù)的發(fā)展,因此,數(shù)據(jù)屬性分為三類:冷數(shù)據(jù)、熱數(shù)據(jù)還有溫數(shù)據(jù)。
冷數(shù)據(jù):這部分數(shù)據(jù)對于存儲要求就是我可以保存數(shù)據(jù),但是對于存儲性能要求不高,所以這部分數(shù)據(jù)我們可以保存在低成本,低性能的存儲里面。比如像磁帶庫,光盤庫等等,這樣可以降低存儲成本。
熱數(shù)據(jù):在需要時能夠隨時查閱的內(nèi)容,但不像數(shù)據(jù)庫存儲等需要較高的性能,如安防監(jiān)控視頻、影視內(nèi)容、圖片、評論、日志等。
溫數(shù)據(jù):有相當(dāng)大的一部分數(shù)據(jù),平時很少被訪問,但是在需要訪問的時候,能夠在約定的時效內(nèi)提供服務(wù),不可能像冷數(shù)據(jù)一樣需要幾個小時才能返回數(shù)據(jù)。數(shù)據(jù)訪問時,可能出現(xiàn)高并發(fā)和高存儲,這是溫數(shù)據(jù)的特點。
那么,擁有巨量溫數(shù)據(jù)的行業(yè)有哪些?
曹敬濤說:“典型的溫數(shù)據(jù)科技企業(yè)包括微博、微信,比如說兩年前的微信朋友圈的數(shù)據(jù)和兩年前發(fā)微博的這些信息大家肯定是很少訪問的,但當(dāng)這些數(shù)據(jù)被訪問時,我們還是需要及時為用戶呈現(xiàn)出來。這些數(shù)據(jù)占據(jù)相當(dāng)大的比例,約80%左右。還有交通行業(yè),每天卡口產(chǎn)生巨量的數(shù)據(jù),包括拍到違法圖片、視頻等等,這部分數(shù)據(jù)只有當(dāng)發(fā)生交通事故或案件時大家才能真正訪問到。再有一部分的溫數(shù)據(jù)來自廣電行業(yè),對于新上線的電影、電視劇,大家都會訪問。但兩年前電影、電視劇很少被訪問,偶爾訪問只是說能夠快速給用戶提供服務(wù)就可以了?!?/p>
傳統(tǒng)降低存儲成本的主要方法:
第一是數(shù)據(jù)分層,將熱數(shù)據(jù)保存在比較高性能,高成本的存儲介質(zhì)上面,包括SSD、SAS、SATA。包括低的數(shù)據(jù)可以存在SATA盤上,這樣可以有效降低數(shù)據(jù)存儲成本;
其次,提高出盤率,通過軟件技術(shù),包括精簡培殖,擦除編碼等等,使磁盤達到最高的出盤率,從而降低數(shù)據(jù)的存儲成本;
數(shù)據(jù)歸檔,如社保數(shù)據(jù)可能保存幾十年,保存到每個人去世以后這些數(shù)據(jù)才會被銷毀。這部分數(shù)據(jù)可以采用低成本的存儲介質(zhì),如磁盤庫、磁帶庫的方式保存這些數(shù)據(jù),從而降低存儲成本;
另外,可以提高硬件效率,這一塊主要通過各種虛擬化,包括計算虛擬化,存儲虛擬化和網(wǎng)絡(luò)虛擬化,從而提高硬件使用效率,采用更少的硬件資源,來滿足業(yè)務(wù)要求。比如電力成本在存儲整體成本中,占據(jù)了相當(dāng)大的比重,只有降低能耗,才能為客戶帶來最高的投資回報率。
凱翔MegaBric一改傳統(tǒng),有效降低長期存儲成本
MegaBric是一個分布式集群存儲,利用MegaBric分享一些資源,對外形成統(tǒng)一存儲服務(wù)。對外提供服務(wù)實現(xiàn)了包括iSCSI、NFS、CIFS等等。全對等的分支架構(gòu)沒有單聯(lián)故障。MegaBric有幾個功能點,還有全局負載均衡,多重數(shù)據(jù)保護,包括像快照、副本、擦除編碼等等。還有按需服務(wù)和精簡配置,另外有簡單高效的管理平臺。在橫向擴展方面以及容量和性能上都可以做到線性擴展、在線擴展。
MegaBric既可以降低一次性成本,也可以降低長期的存儲成本,在電源管理策略模塊,主要管理存儲的每一個磁盤,每個磁盤配一個電源,當(dāng)磁盤上的數(shù)據(jù)沒有被讀寫時,可以將磁盤進行斷電。管理平臺主要從運維成本上來降低整體成本,包括比較豐富的告警管理、通知管理、報表性能等等,可以在線升級。
MegaBric從硬件上做到高密度,高密度是降低成本的一個手段,既降低能源消耗又降低制冷要求。此外,MegaBric節(jié)省空間和開支。對于硬件還有降低操作成本,降低長期運維成本等優(yōu)勢。從MegaBric的特性可以看出凱翔別具匠心的技術(shù)研發(fā)實力以及其產(chǎn)品的價值。
關(guān)于凱翔
凱翔科技成立于2012年,總部在上海,在美國硅谷設(shè)有研發(fā)中心,核心團隊主要來自于各大存儲廠商,客戶群主要分布在廣電運營商、電信運營商、電商、交通、教育以及各大企業(yè)。