【圖】曙光副總裁邵宗有發(fā)表演講

事實上，大數(shù)據(jù)與高性能計算的融合是高性能計算技術不斷發(fā)展，以及大數(shù)據(jù)對于超強計算能力需求的必然結(jié)果。一方面，大數(shù)據(jù)的發(fā)展為高性能計算提供了更為廣闊的應用空間，無論是傳統(tǒng)的科研應用，還是金融、通訊、互聯(lián)網(wǎng)等高性能計算的新用戶，隨著數(shù)據(jù)量 越來越大，以及大部分用戶對于數(shù)據(jù)價值挖掘的意識不斷加強，一套高效、可靠、彈性擴展的數(shù)據(jù)處理方法和工具就變得非常必要了。另一方面，而隨著高性能計算 系統(tǒng)性能的日益提升，越來越多的用戶開始考慮采用高性能計算的集群來進行數(shù)據(jù)處理和分析。

截止到這次中國超級計算機Top100排行榜公布，曙光已經(jīng)連續(xù)五屆獲得中國超級計算機Top100份額第一。但是，邵宗有表示，曙光從去年開始就 在逐步淡化排名，而是把大部分精力用于推動高性能計算機的應用。“傳統(tǒng)高性能計算機市場競爭越來越激烈了，曙光過去兩年一直在開辟高性能計算機的新市場， 比如云計算，曙光通過深圳(超級計算中心)來提供云計算服務。過去一年多，曙光找到了一個更大的市場——大數(shù)據(jù)”。

大數(shù)據(jù)在互聯(lián)網(wǎng)、通信、金融、衛(wèi)生、交通、安全等領域是非常重要的。邵宗有表示，中國現(xiàn)在大數(shù)據(jù)用得比較好的主要有幾個領域：一是消費行為分析，比 如淘寶、銀行、電信等都有消費行為的分析，做消費行為分析主要是為了兩個目標，一是風險防控，二是精準營銷;另一個叫社會行為分析，社會行為分析又分成輿 情和情報。

大數(shù)據(jù)挑戰(zhàn)總結(jié)起來就是4個V(Volumn、velocity、Variety、Value)，經(jīng)過研究和分析認為高性能能計算機比較好的解決這 些問題。邵宗有談道，這一兩年以來，曙光高性能計算機的研發(fā)團隊，主要在做高性能計算機與大數(shù)據(jù)的結(jié)合。今年上半年曙光推出了大數(shù)據(jù)一體機XData，把 高性能計算機的框架跟Map Reduce和hadoop框架融合在一起，實現(xiàn)一個完整的軟件層，再加上底層高性能計算機、結(jié)構存儲、網(wǎng)絡。

我們知道，高性能計算機包括計算、存儲、網(wǎng)絡和軟件四個主系統(tǒng)。大數(shù)據(jù)一體機和高性能計算機的通訊主系統(tǒng)和存儲主系統(tǒng)基本沒什么不同，只是在計算主 系統(tǒng)中，高性能計算機更多的是用超薄的刀片，大數(shù)據(jù)更多的是數(shù)據(jù)服務器，上層的軟件主系統(tǒng)中，大數(shù)據(jù)一體機則是融合了高性能曙光Gridview和 Hadoop兩個軟件。“Map Reduce的模式將來會深刻影響到高性能計算機的應用，Map Reduce的高性能計算機用于大數(shù)據(jù)一體機就說明了Map Reduce是MPI的有效補充”，邵宗有補充說道。

事實上，對用戶而言，缺的不是數(shù)據(jù)，也不是資金，而是大數(shù)據(jù)的視角，如何去應用大數(shù)據(jù)。“對曙光來說，就是要樹立各個行業(yè)的“橋頭堡”，推動大數(shù)據(jù) 在各個行業(yè)的應用，包括電信、銀行等等，我們現(xiàn)在都在推動，”邵宗有在采訪中表示，曙光還要做一個專業(yè)的團隊去給用戶提供服務。

據(jù)透露，目前，曙光現(xiàn)在正在研發(fā)一款數(shù)據(jù)存儲與計算在一起的大機器，有望今年年底能完成。

分享到

tangrong

相關推薦