感受富士通的大數據
DOIT原創(chuàng) 崔昊 發(fā)表于：13年06月19日 10:28 [原創(chuàng)] DOIT.com.cn
感受富士通的大數據
正如文章開頭所說，這是一個“充斥著云計算與大數據的時代”，Big Data的熱潮持續(xù)發(fā)酵，對于IT廠商來說，如何將開源的大數據處理平臺，轉移到企業(yè)級的應用環(huán)境，提供廠商級別的支持服務，將大數據在網站，社交媒體的批處理向實時和近實時大數據處理的企業(yè)應用拓展。
周一平就此表示，無論是大數據還是云計算，實際上后端的硬件平臺變化并不大，更大的價值在于軟件平臺與解決方案能力上，他透露，富士通很快就會在數據庫一體機、大數據系統上有新的發(fā)布，這些系統都屬于業(yè)界當下流行的Appliance——集成系統——范疇，不過在目前，富士通在大數據業(yè)務上的積累同樣豐富，已經樹立了富士通在“Big Data方面的標桿”。
首當其沖的自然是富士通的ETERNUS存儲系統，以ETERNUS DX400 S2、ETERNUS DX8700 S2為代表的富士通中高端存儲系統，以ETERNUS DX80 S2/DX90 S2、ETERNUS DX60 S2為代表的中小企業(yè)及入門級存儲系統、以ETERNUS CS800 S3、ETERNUS CS High End V5為代表的數據保護系統，以及ETERNUS SF存儲軟件等產品，組成了富士通的企業(yè)級存儲產品線，其產品涵蓋低中高端主存儲系統、數據保護、存儲管理軟件、磁帶以及SAN交換領域。
既有針對具體實施環(huán)境的文件存儲和虛擬存儲平臺，也有基于數據塊存儲和數據備份與存檔平臺。完整的數據存儲系統，可為大數據的商業(yè)分析提供強大支撐，完全兼容Hadoop、HANA、NoSQL等商業(yè)數據分析應用場景。
在ETERNUS DX8700 S2等富士通中高端存儲產品中，除了提供2-8個單元的橫向擴展能力，高達3072個磁盤的容量以及不中斷容量升級、統一存儲接口等功能之外，使用SAS、近線SAS和SSD驅動器選項的多層存儲優(yōu)化、自加密硬盤(SED)、基于硬件的遠程復制，都為富士通企業(yè)存儲系統的用戶提供了相對前沿的企業(yè)級技術體驗。
與此同時，富士通也在加強磁盤備份系統的市場進度，作為一款針對備份至磁盤而進行優(yōu)化的、支持重復數據刪除的數據保護設備，ETERNUS CS800 S3是一個將重復數據刪除，復制技術和遠程復制技術集成于一個易于使用的設備，周一平表示，這一產品面向企業(yè)級的數據，而富士通也不會放棄ETERNUS CS High End V5這樣的大型數據中心級數據保護系統，他認為，在大數據時代，大量數據的匯總的數據保護，以及具有現實意義的金融、廣電行業(yè)的帶庫大集中項目中，ETERNUS CS High End V5這樣的產品仍然具有很強的需求。
在大數據業(yè)務方面，正如上述文章所說，富士通大數據并行處理解決方案Interstage Big Data Parallel Processing (BDPP)將富士通集群技術同開源的Hadoop分布式處理完美的整合，針對企業(yè)級應用中大數據實時和近實時的處理要求，富士通將其集群技術中的分布式文件系統P-DFS同Hadoop Map/Reduce服務器集群進行整合，在保留原有的POSIX標準文件存取接口，開發(fā)了Hadoop專用的HDFS 文件存取接口，使得傳統的業(yè)務應用無需通過Hadoop特殊的API存取將被處理的數據。Hadoop MAP / Reduce 服務器群的每一個節(jié)點，則可以通過富士通P-DFS HDFS接口，存取駐存在共享的ETERNUS磁盤陣列上的數據。正是這種共享的存儲系統架構和分布式的文件系統，避免了數據在采集，整合，處理階段無謂的上傳，下傳，這在大數據環(huán)境下，其節(jié)省的時間是相當可觀的。同時大數據在處理的過程中，始終駐存在企業(yè)級的存儲系統上(ETERNUS)，結合存儲系統自帶的快照和鏡像功能，大數據的可靠性得以提升至企業(yè)級安全水平。
