近日，曙光副總裁邵宗有在接受媒體采訪時(shí)表示：“高性能計(jì)算完美契合了大數(shù)據(jù)在運(yùn)算能力、高性能存儲(chǔ)等方面需求，而大數(shù)據(jù)則給高性能計(jì)算提供了新型商業(yè)市場(chǎng)，有助于推動(dòng)高性能計(jì)算拓展新的市場(chǎng)藍(lán)海，兩者在產(chǎn)業(yè)生態(tài)鏈上的緊密銜接可以很好的推進(jìn)信息資源組織模式的深入變革與發(fā)展。”

高性能計(jì)算化解大數(shù)據(jù)應(yīng)用挑戰(zhàn)

雖然大數(shù)據(jù)技術(shù)與大數(shù)據(jù)應(yīng)用得到了快速的擴(kuò)展，但是仍舊存在著很多問題，其中比較突出的是“4V”挑戰(zhàn)（容量、類型、速度、價(jià)值）。目前，大數(shù)據(jù)的容量可達(dá)到PB級(jí)，這些大容量數(shù)據(jù)的存儲(chǔ)、處理會(huì)對(duì)用戶的計(jì)算系統(tǒng)產(chǎn)生極大負(fù)擔(dān)，建立在普通計(jì)算能力基礎(chǔ)上的系統(tǒng)往往無(wú)法滿足大數(shù)據(jù)的需求，更無(wú)法為用戶獲取價(jià)值以實(shí)現(xiàn)領(lǐng)先于他人的優(yōu)勢(shì)。

邵宗有表示：“在應(yīng)對(duì)大數(shù)據(jù)挑戰(zhàn)的過程中，高性能計(jì)算可以起到重要作用。從數(shù)據(jù)的存儲(chǔ)與處理的角度來說，采用高性能計(jì)算系統(tǒng)不僅可以大幅降低大容量存儲(chǔ)的成本，而且其處理數(shù)據(jù)、傳輸數(shù)據(jù)、恢復(fù)數(shù)據(jù)的速度會(huì)遠(yuǎn)遠(yuǎn)超過普通的計(jì)算系統(tǒng)。在過去完整恢復(fù)一塊硬盤的速度可能需要48個(gè)小時(shí)，

但融合了曙光高性能計(jì)算技術(shù)的存儲(chǔ)產(chǎn)品，能將時(shí)間控制在十幾分鐘，顯著降低了大規(guī)模集群存儲(chǔ)系統(tǒng)中用戶運(yùn)維的壓力，提高了系統(tǒng)效率。”

此外，高性能計(jì)算還可以為大數(shù)據(jù)應(yīng)用中的數(shù)據(jù)同化問題提供解決思路。在大數(shù)據(jù)采集系統(tǒng)中，可能各個(gè)采集設(shè)備采集的數(shù)據(jù)在格式與類型上都是不一樣的，將這些不同的數(shù)據(jù)進(jìn)行統(tǒng)一會(huì)消耗大量的計(jì)算資源。而高性能計(jì)算在數(shù)據(jù)同化方面已經(jīng)取得重要進(jìn)展，其同化的速度和精確性已經(jīng)能保持在一個(gè)很高的水平，其發(fā)展成果“嫁接”到大數(shù)據(jù)中會(huì)產(chǎn)生巨大的價(jià)值，并推動(dòng)實(shí)現(xiàn)數(shù)據(jù)的組織和管理，基礎(chǔ)架構(gòu)，決策支持和自動(dòng)化界面和分析。

高性能計(jì)算和大數(shù)據(jù)將深入融合 推動(dòng)實(shí)際應(yīng)用

對(duì)于任何一種技術(shù)概念，應(yīng)用都是其體現(xiàn)最終價(jià)值的落腳點(diǎn)。目前，大數(shù)據(jù)正在處于從概念到應(yīng)用的過渡時(shí)期，大數(shù)據(jù)應(yīng)用在產(chǎn)業(yè)成熟度、用戶接受度、系統(tǒng)易用性等方面都存在著很多障礙。大數(shù)據(jù)應(yīng)用怎樣部署？大數(shù)據(jù)存儲(chǔ)的數(shù)據(jù)怎樣產(chǎn)生價(jià)值？如何將大數(shù)據(jù)分析后產(chǎn)生的結(jié)論應(yīng)用到企業(yè)運(yùn)營(yíng)的決策之中？由于缺乏大規(guī)模應(yīng)用的成熟案例與產(chǎn)業(yè)集群，金融用戶等行業(yè)用戶遲遲無(wú)法下定部署大數(shù)據(jù)的決心。

邵宗有指出：“相對(duì)于大數(shù)據(jù)來說，高性能計(jì)算在很多行業(yè)用戶中都得到了較早的部署與應(yīng)用，其部署可以在軟硬件一體化平臺(tái)、數(shù)據(jù)存儲(chǔ)等方面為大數(shù)據(jù)應(yīng)用打下良好的基礎(chǔ)。特別是高性能計(jì)算和大數(shù)據(jù)在內(nèi)在邏輯上是相通的，在平臺(tái)擴(kuò)展、應(yīng)用落地等方面具有互補(bǔ)優(yōu)勢(shì)，這就滿足了高性能計(jì)算和大數(shù)據(jù)進(jìn)行融合的充分性條件。”

為了推進(jìn)高性能計(jì)算與大數(shù)據(jù)的融合發(fā)展，改善大數(shù)據(jù)應(yīng)用環(huán)境，目前曙光已經(jīng)發(fā)布“平臺(tái)一體，智匯應(yīng)用”的行業(yè)大數(shù)據(jù)戰(zhàn)略，并通過軟硬件結(jié)合的一體化平臺(tái)作為支撐。其中，硬件XData大數(shù)據(jù)一體機(jī)采用成熟的高性能計(jì)算機(jī)和高性能存儲(chǔ)系統(tǒng)作為基礎(chǔ)，在軟件上則整合了高性能操作系統(tǒng)與Hadoop軟件。解決方案全面集合曙光在高性能計(jì)算、高性能存儲(chǔ)等方面的資源優(yōu)勢(shì)，可為行業(yè)企業(yè)構(gòu)建有競(jìng)爭(zhēng)力的大數(shù)據(jù)整體解決方案和服務(wù)，達(dá)到平臺(tái)能力及應(yīng)用的靈活擴(kuò)充和增長(zhǎng)，提供真正的統(tǒng)一數(shù)據(jù)分析能力。