阿里巴巴集團副總裁周靖人與英特爾公司數(shù)據(jù)中心事業(yè)部副總裁Rob Hays

英特爾數(shù)據(jù)中心事業(yè)部副總裁Robert Hays 表示,”我們非常高興能夠和阿里云共同在最新的英特爾至強可擴展處理器平臺上對MaxCompute進行深度優(yōu)化,并見證阿里云MaxCompute在BigBench測試中表現(xiàn)出的優(yōu)異成績“。

更快的流計算StreamCompute 2.0

在流計算方面,周靖人透露將于10月底在公共云發(fā)布新的版本。StreamCompute 2.0基于Apache Flink,并為開源社區(qū)提供了大量阿里內部的改進和優(yōu)化。

新版流式計算2.0的特點包括:

1. 高吞吐低時延處理能力,單作業(yè)峰值達數(shù)千萬的QPS,相比于StreamCompute 1.0有10+倍提升

2. SQL化的流式分析語言,由阿里巴巴計算事業(yè)部實時計算團隊主導開發(fā)并回饋社區(qū)的BlinkSQL;BlinkSQL支持完備的流式處理語義,支持包括多種窗口、亂序容忍、完整DDL支持

3. 精準的數(shù)據(jù)處理語義,提供Exactly-once處理語義,同時為減少磁盤IO,提供增量CheckPoint,優(yōu)化存儲空間。

E-MapReduce性能3倍提升

E-MapReduce產(chǎn)品是阿里云上基于開源大數(shù)據(jù)的云服務產(chǎn)品,包括15+個開源組件的一站式大數(shù)據(jù)解決方案。周靖人現(xiàn)場發(fā)布了基于本地硬盤以及計算存儲分離的大數(shù)據(jù)解決方案。

周靖人介紹,為了解決大數(shù)據(jù)處理以及機器學習的統(tǒng)一調度難題,E-MapReduce產(chǎn)品實現(xiàn)了CPU/GPU的混合調度方案,使得數(shù)據(jù)預處理以及數(shù)據(jù)訓練可以在一個平臺上解決。

E-MapReduce對于數(shù)據(jù)讀寫的性能至關重要,產(chǎn)品通過對于對象存儲OSS的優(yōu)化,使得讀寫OSS的性能是同類產(chǎn)品的3倍,對于計算和存儲分離的大數(shù)據(jù)解決方案的產(chǎn)品化形式變得可以落地。

分享到

xiesc

相關推薦