報告涉及的亞馬遜云科技分析數(shù)據(jù)解決方案組合包括云數(shù)據(jù)倉庫服務Amazon Redshift、交互式查詢服務Amazon Athena、數(shù)據(jù)集成服務Amazon Glue和快速構(gòu)建數(shù)據(jù)湖的服務Amazon Lake Formation。同時涉及幾個額外功能,包括應用數(shù)據(jù)傳輸服務Amazon AppFlow、存儲數(shù)據(jù)傳輸服務Amazon DataSync、Amazon Redshift Spectrum(跨數(shù)據(jù)倉庫、數(shù)據(jù)湖和運營數(shù)據(jù)庫的數(shù)據(jù)查詢功能)和數(shù)據(jù)庫遷移服務Amazon Database Migration Service。
數(shù)據(jù)分析服務集大成者:Amazon Redshift
作為業(yè)界首個云原生數(shù)據(jù)倉庫, Amazon Redshift 使用 SQL語言在數(shù)據(jù)倉庫、運營數(shù)據(jù)庫和數(shù)據(jù)湖之間分析結(jié)構(gòu)化和半結(jié)構(gòu)化數(shù)據(jù)。Amazon Redshift的查詢引擎非常強大,可以高效處理包含多表聯(lián)接、子查詢和聚合的復雜分析查詢。Amazon Redshift數(shù)據(jù)倉庫以節(jié)點為單位配置計算資源,一個節(jié)點也可建立一個集群,每個集群運行一個引擎,從而讓Amazon Redshift的分析性能可以橫向擴展。
此外,Amazon Redshift還具備并發(fā)擴展功能,支持成千上萬的并發(fā)用戶和并發(fā)查詢,同時提供始終如一的快速查詢性能??蛻糸_啟并發(fā)擴展后,Amazon Redshift 會自動增加額外的集群容量來處理增多的讀取查詢和寫入查詢。不管查詢在主集群上運行還是在并發(fā)擴展集群上運行,用戶都將看到最新的數(shù)據(jù)。
Amazon Redshift具有多可用區(qū)功能,可以幫助企業(yè)自動在多可用區(qū)之間實現(xiàn)整個服務的容災,為關(guān)鍵任務分析工作負載提供極致的可用性和可靠性。
與其他云數(shù)據(jù)倉庫相比,Amazon Redshift提供高達5倍的性價比;在高并發(fā)、低延遲工作負載上,其性價比則高達其他云數(shù)據(jù)倉庫的7倍。
服務全球各行各業(yè)客戶
全球超過150萬客戶正在使用亞馬遜云科技的數(shù)據(jù)庫、分析和機器學習服務。
美國金融監(jiān)管局(FINRA)需要在超過20PB的數(shù)據(jù)上運行復雜的監(jiān)控查詢,每天處理1500億個事件,以檢測和分析非法市場活動。原有的系統(tǒng)無法擴展以滿足這一需求。FINRA于是從其大數(shù)據(jù)設(shè)備遷移到Amazon Simple Storage Service (Amazon S3) 數(shù)據(jù)湖,并使用Amazon Lambda 和 Amazon Elastic MapReduce (Amazon EMR) 進行數(shù)據(jù)攝取,使用Amazon EMR 和 Amazon Redshift 進行數(shù)據(jù)處理。
遷移之后,F(xiàn)INRA提高了敏捷性、速度,并節(jié)省了成本,滿足了大規(guī)模運營的需求。FINRA估計每年將節(jié)省1000萬美元到2000萬美元。FINRA執(zhí)行副總裁兼首席信息官Steve Randich表示:“我們每天有 750 億筆交易,hbase (Hadoop) 中有 2 萬億行代碼。 借助亞馬遜云科技,我們實現(xiàn)了巨大的系統(tǒng)性能改善、卓越的網(wǎng)絡安全, 并提高了彈性和業(yè)務連續(xù)性。亞馬遜云科技幫助我們擺脫了專有數(shù)據(jù)庫供應商的束縛?!?/p>
JOYME 旗下的LiveMe是全球直播和社交平臺,每天支持超過10萬次直播。IDC曾在報告*2中指出:“到2026年,50%的數(shù)據(jù)捕獲和移動技術(shù)支出將用于實時流式數(shù)據(jù)管道,從而支持新一代的實時仿真、模擬、優(yōu)化和推薦功能?!盠iveMe在全球 220 多個國家/地區(qū)擁有上百名“百萬訂閱者”和超過 300 萬直播流媒體。
JOYME使用了亞馬遜云科技分析服務的多項功能,包括無需通過Amazon S3存儲和加載數(shù)據(jù),就可以將用戶行為日志直接提取到Amazon Redshift 中進行實時分析;以及使用Amazon Redshift托管存儲存放壓縮后的數(shù)據(jù);和使用Amazon Redshift的流數(shù)據(jù)攝取、并發(fā)縮放、超級數(shù)據(jù)類型等功能。
最終,JOYME將風控業(yè)務效率提升30%,從應用程序到數(shù)據(jù)倉庫的數(shù)據(jù)攝取延遲不到 60 秒,總擁有成本降低50%。JOYME 首席技術(shù)官PengBo Yang表示:“JOYME 使用 Amazon Redshift的流式攝取和亞馬遜云科技的其它云服務對用戶充值、退款和獎勵等金融活動進行風險控制。借助Amazon Redshift,我們能夠近乎實時地查看風險對比報告和數(shù)據(jù),而以往只能每小時查看一次,最終顯著提高了業(yè)務人員的效率。”