這個世界變化太快,數據爆炸式增長帶給存儲廠商新的發(fā)展,在這個環(huán)境下,是什么東西給予了大數據生命?相信大數據也有它自己的運作機理,科技廠商、政府、學者、媒體都在推動大數據走向成熟,我們需要做的就是應該按照大數據的發(fā)展需求順應形勢,適時制定自己的發(fā)展策略。如此以來大數據的運作才能更健康,也能更快的走向成熟。
如果社會是不發(fā)展的,自然就沒有生機可言,正是因為企業(yè)擁有的信息量不斷增大,企業(yè)面臨的形勢也時刻在變化,這促成了大數據時代的形成。所以變化應該是大數據生命力的來源,即為大數據的靈魂。
2012的市場尤其適合用變化這一關鍵詞來形容。市場需求和廠商策略兩大市場變量可謂是風隨火起,火借風勢。不管是IBM、EMC等存儲巨頭,即是小的存儲廠商也越來越注重市場需求的變化。所以可以看到的是今年很多存儲廠商策略涉及的關鍵詞都是統(tǒng)一存儲、一體機、固態(tài)存儲、融合等等。
大數據的火熱也為一批新的產品和技術提供了更廣闊的施展空間,這其中,數據庫一體機和分布式計算系統(tǒng)Hadoop就是最明顯的代表,因為將計算、存儲硬件以及應用軟件進行集成,在簡化部署的同時降低應用和管理難度,一體化集成系統(tǒng)已經成為了各大IT供應商搶占的新高地,主流廠商相繼推出面向數據庫應用的一體機,包括Oracle三大數據處理集成系統(tǒng)、惠普AppSystem for Hadoop以及IBM的PureData System,而這些集成系統(tǒng)都選擇了共同的平臺——英特爾x86架構。
主流的大數據處理集成系統(tǒng)中,英特爾x86架構正在成為一種新的標準平臺,英特爾至強處理器這一堅實基石也使眾多的軟硬集成解決方案如虎添翼,并得以彰顯最大的威力。另一方面,除了已經成為傳統(tǒng)計算領域中的開放標準,英特爾也正在大數據這股新浪潮中打造一個新的標準化硬件生態(tài)系統(tǒng)。
數據本來沒有什么價值,但是通過特定的算法對海量的數據進行挖掘和分析之后,客戶的需求和市場的發(fā)展趨勢便會明晰起來。數據挖掘和數據分析是從數據變?yōu)橛袃r值的信息最終影響決策者決策的途中的關鍵一環(huán)。
數據分析對互聯網的改變是巨大的,只是這些改變存在于細節(jié)之間。例如hao123,數年之前hao123還只是一個將各類網站匯總的一個頁面而已,現在雖然 匯總各類網站仍是其重要的功能,但是現在hao123能呈現實時新聞、當下熱門的小游戲等信息,能將當下最受矚目的信息呈現出來,這就是數據分析的作用。當然hao123只是數據分析的一個縮影,很多業(yè)界人士預言將來用戶的一次對汽車信息的搜索可能會在下次到超市的時候接收到很多有關汽車用品的推銷信息。
物聯網:這是一個非常重要的數據來源,大量的傳感器給上層決策者提供了第一手的信息。這一層是大數據與自然界接觸的第一層,在大數據時代,物聯網實 為大數據的五官,為其感知外部世界。 社交網絡給企業(yè)提供了一個發(fā)現客戶需求的一個新的途徑,越來越多的人開始重視以Facebook為首的社交網絡上人們發(fā)布的狀態(tài)給他們帶來的信息。 完整Hadoop的技術堆棧包括常用設施、分布式文件系統(tǒng)、分析和數據存儲平臺,以及管理分布式處理、并行計算、工作流程和配置管理的應用層。
今年的Hadoop跟隨大數據的熱潮也熱了一把,特別是英特爾發(fā)布了Hadoop發(fā)行版。其中包含Hadoop分布式文件系統(tǒng)HDFS、分布式數據庫HBase、分布式計算框架 MapReduce、數據倉庫Hive、數據處理Pig、機器學習Mahout商業(yè)套件。筆者參加的幾個大數據相關的大型論壇也也都是將Hadoop和大數據結合進行討論的。
時間長了,企業(yè)運維難免出現意外,備份一直以來是企業(yè)應對數據丟失、服務器宕機等問題的主要手段。數據的暴增、宕機、設備性能無法趕上需求步伐等問 題困擾著每位決策者。一次服務器的意外宕機可能使公司停止數小時運作或是丟失大量客戶資料。應該說災難的不可避免催生了備份市場的繁榮。
今 年的災備市場應該給以改革和發(fā)展兩個關鍵詞,改革是備份廠商紛紛調整策略適應新的市場需求,賽門鐵克推出備份一體機、CommVault推出“147”數 據管理解決方案應該都是數據保護里面非常具有代表性的事件。而發(fā)展則是國內備份市場的發(fā)展,愛數、和力記易、火星高科等備份廠商都積極應對當前的市場需 求,國產備份在今年討論的非常多。
從單個的PC到數據中心再到Internet,網絡思想可謂無處不在,大數據時代單個的節(jié)點上已經很難應對企業(yè)的需求,網絡存儲應該是存儲應對大數據絕佳策略。而各種適配卡則是網絡中不同設備或是組件之間協(xié)調的交點。適配卡使得存儲網絡更具擴展性和靈活性。
隨著Emulex 16G FC光纖通道HBA卡的推廣,適配卡市場朝著更快的速度、更穩(wěn)定的性能、更豐富的產品以及更高的虛擬化幾個方向發(fā)展。Adaptec by PMC 7系列、LSI Syncro都稱得上適配器市場上的亮點。適配器作為對設備性能的擴展和提升工具正朝著更快、更穩(wěn)、更多樣化的方向發(fā)展。
高端存儲和低端存儲猶似雙腳將大數據與企業(yè)實際情況對接,畢竟對于企業(yè)而言,大數據未免過于空泛。具體的系統(tǒng)構建策略還是應該有具體的解決方案支持的。所以當前眾多廠商均針對不同層級客戶劃分高中低三條產品線以適應企業(yè)的具體需求。
由于中小企業(yè)的數量劇增,國內SMB存儲市場今年尤為火熱。EMC、惠普、NetApp、Dell都非常重視SMB市場的發(fā)展,IBM的V3500和V3700的發(fā)布更是中低端存儲市場上不可不提的產品。中高低三個存儲市場對存儲系統(tǒng)有著各異的需求,針對不同的企業(yè)規(guī)模發(fā)展不同的產品線無疑是使自己的發(fā)展理念落地的絕佳策略。
數據應該是大數據的基本組成單元,所以應該說數據是大數據生命體的血肉,不管是數據中心還是存儲網絡以至云,都需要大量的硬盤、閃存以及磁帶作為底層的存儲介質。 數據以及硬盤、閃存和磁帶是大數據的血肉。
閃存市場上Violin、Fusion—IO等閃存廠商表現比較搶眼,另外EMC推出的全閃存陣列,英特爾、三星、華為的SSD產品以及IBM對TMS的收購都是都體現了固態(tài)存儲的強大生命力。另外傳統(tǒng)硬盤市場經過幾十年的發(fā)展只剩希捷、西部數據和東芝三足鼎立。