圖 1 星辰天合高級副總裁張旭明在論壇上發(fā)表主題演講

這半年以來，跟人工智能相關(guān)最火熱的概念就是大模型，他們固然對 GPU 算力有著非常突出的需求，但是在另外一個維度來說，也對存儲有著不一樣的需求，需要在數(shù)據(jù)中心層面實現(xiàn)算力與存力的協(xié)同。

人工智能應(yīng)用，尤其是在大模型領(lǐng)域，在數(shù)據(jù)層面有著幾個顯著的特點。其一是參數(shù)規(guī)模特別大，其二是數(shù)據(jù)來源非常廣泛，這造成了非常大的數(shù)據(jù)量，因此他們在存儲層面，主要有著三方面的需求：

• 便利的數(shù)據(jù)匯聚與共享，如何將所需海量數(shù)據(jù)進(jìn)行有效的保存，并且匯聚到一個中心，以便進(jìn)行處理，然后將其分享出去，這是一個很高的門檻；
• 存儲需要足夠的高擴展性和高性能，畢竟，對于 AI 訓(xùn)練而言，時間和效率，是非常重要的；
• 在保證性能的前提下，解決方案需要具備足夠好的性價比，否則無法真正實現(xiàn)大規(guī)模商用。

以三種 SDS 產(chǎn)品，應(yīng)對 AI 數(shù)據(jù)存儲需求

星辰天合的眾多客戶基本上會采用三款產(chǎn)品來解決其 AI 數(shù)據(jù)存儲的需求，以對象存儲來承接海量的數(shù)據(jù)、以高性能文件存儲來做模型訓(xùn)練，同時將相關(guān)的業(yè)務(wù)軟件運行在我們的計算產(chǎn)品之上。

這也是星辰天合在 AI 領(lǐng)域的通用解決方案，該解決方案接入 AI 模型訓(xùn)練的完整數(shù)據(jù)流程，從數(shù)據(jù)收集、數(shù)據(jù)治理到訓(xùn)練評估，一直到數(shù)據(jù)歸檔，星辰天合都可以提供相應(yīng)的數(shù)據(jù)存儲服務(wù)。

除此之外，星辰天合還可以提供眾多數(shù)據(jù)管理的功能。比如說，

• 通過數(shù)據(jù)遷移的方式，我們可以幫助客戶從各個數(shù)據(jù)源端把數(shù)據(jù)匯聚到了我們的對象存儲上；
• 在數(shù)據(jù)完成提取、抽取、清洗等步驟之后，人工智能對存儲的需求就會變成高性能，畢竟，存儲性能太低，就會讓上層的 GPU 等待時間過長，在這個階段，我們提供高性能文件存儲協(xié)議去支持，同時也支持 AI 框架的各類生態(tài)；
• 在后一個階段，我們可以提供數(shù)據(jù)歸檔、復(fù)制在內(nèi)的相關(guān)數(shù)據(jù)流動功能，將計算的結(jié)果數(shù)據(jù)進(jìn)行長期保存。

從高校、自動駕駛到先進(jìn)制造，SDS 服務(wù)各行 AI 應(yīng)用

在高校領(lǐng)域，由于資金有限，高校進(jìn)行相關(guān) AI 應(yīng)用探索時，會格外注意成本問題。在某高校，他們希望解決兩個問題，第一是利舊原有的硬件，第二是解決寫性能不足的問題。這兩點，正好都是軟件定義存儲所能夠體現(xiàn)的價值。

圖 2 星辰天合高級副總裁張旭明分享 SDS 在 AI 領(lǐng)域應(yīng)用案例

一方面，星辰天合的軟件定義存儲產(chǎn)品可以整合原有的硬件存儲節(jié)點，將其形成一個高質(zhì)量有效的存儲資源；另外一方面，星辰天合的產(chǎn)品能夠提供一個目錄預(yù)取，存儲產(chǎn)品可以感知業(yè)務(wù)需要的數(shù)據(jù)。在很多 AI 訓(xùn)練時會一次性讀取一個訓(xùn)練集的數(shù)據(jù)，如果存儲產(chǎn)品能夠感知相關(guān)業(yè)務(wù)需求，相關(guān)后續(xù)的訓(xùn)練就會更加高效。

在自動駕駛領(lǐng)域，自動駕駛的汽車上面載有激光雷達(dá)和攝像頭，在路面運行時，會將所有的路測數(shù)據(jù)收集回來供后續(xù)研發(fā)使用。這些數(shù)據(jù)量非常大，以星辰天合的某自動駕駛領(lǐng)域的客戶舉例，他們每天會有數(shù)百 TB 的數(shù)據(jù)增量。這些數(shù)據(jù)收集回來之后，以對象存儲的方式存儲，清洗完之后迭代其數(shù)據(jù)源，導(dǎo)入到高性能文件存儲中以適配它的模型訓(xùn)練。

在先進(jìn)制造行業(yè)、金融行業(yè)，我們所服務(wù)的企業(yè)也是類似的場景和需求。我們也同樣提供了一種方案，由對象存儲來承接其訓(xùn)練元數(shù)據(jù)，清洗完之后的數(shù)據(jù)在高性能文件存儲中訓(xùn)練，訓(xùn)練完之后歷史數(shù)據(jù)重新再利用對象存儲歸檔。

從數(shù)據(jù)存儲、數(shù)據(jù)流動，到整合數(shù)據(jù)生態(tài)平臺

作為技術(shù)領(lǐng)先的數(shù)據(jù)基礎(chǔ)設(shè)施提供商，星辰天合以“數(shù)據(jù)常青”為使命，始終專注于軟件定義存儲領(lǐng)域，以數(shù)據(jù)價值為核心為客戶提供數(shù)據(jù)服務(wù)。

圖 3 星辰天合以軟件定義存儲為客戶提供數(shù)據(jù)服務(wù)

為更方便理解星辰天合所提供的產(chǎn)品和服務(wù)，我們將數(shù)據(jù)服務(wù)分為了三個層次：

• 第一，星辰天合可以幫助客戶構(gòu)筑數(shù)據(jù)存儲平臺，能夠提供擴展性、高性能、敏捷性、靈活性、低成本的數(shù)據(jù)存儲系統(tǒng)。
• 第二，星辰天合可以為客戶提供數(shù)據(jù)管理平臺，客戶的業(yè)務(wù)所使用的是數(shù)據(jù)，需要我們提供的是數(shù)據(jù)服務(wù)。在傳統(tǒng)模式中，所有的數(shù)據(jù)存在于硬件介質(zhì)中，其本身有生命周期，當(dāng)硬件老化之后就可能要被替換。而軟件定義存儲將數(shù)據(jù)存在軟件中，硬件的更換迭代不影響給業(yè)務(wù)提供數(shù)據(jù)服務(wù)；此外，需要將數(shù)據(jù)快速出現(xiàn)在業(yè)務(wù)想要訪問它的位置，以供業(yè)務(wù)進(jìn)行數(shù)據(jù)分析等，因此數(shù)據(jù)的智能流動是新一代存儲架構(gòu)中的重要特性，而這已經(jīng)脫離了傳統(tǒng)存儲的能力范疇。
• 第三，企業(yè)需要對數(shù)據(jù)生態(tài)平臺進(jìn)行整合，星辰天合努力兼容各種業(yè)務(wù)生態(tài)，包括云計算、大數(shù)據(jù)、人工智能，以及敏態(tài)發(fā)展各類容器的業(yè)務(wù)等，這也是數(shù)據(jù)服務(wù)廠商需要支持的。

通過在軟件定義存儲領(lǐng)域的長期創(chuàng)新與突破，星辰天合以豐富的產(chǎn)品和解決方案，幫助企業(yè)實現(xiàn)存力與算力的協(xié)同。 在大數(shù)據(jù)與人工智能發(fā)展極為迅猛的今天，為持續(xù)滿足相關(guān)應(yīng)用對存儲的需求，星辰天合的存儲也在不斷地革新中。在今年，星辰天合也即將發(fā)布一個全新的全閃架構(gòu)，帶動存儲系統(tǒng)性能的大幅度進(jìn)步，在更高端的領(lǐng)域?qū)崿F(xiàn)存力與算力的協(xié)同進(jìn)步與均衡發(fā)展。

崔歡歡