MRS版本帶來了如下特性:
MRS提供了企業(yè)級一站式大數(shù)據(jù)服務(wù),包含了業(yè)界主流的大數(shù)據(jù)開源技術(shù)(Hadoop,Spark,HBase,Kafka,CarbonData,Storm等)。
MRS提供彈性伸縮能力,可以自動在業(yè)務(wù)繁忙時申請額外資源,業(yè)務(wù)不繁忙時釋放閑置資源,讓用戶按需使用,盡可能的幫助客戶降低使用成本,聚焦核心業(yè)務(wù)。
MRS新支持了集群縮容功能。用戶可以根據(jù)業(yè)務(wù)需要簡單的縮減Core節(jié)點或者Task節(jié)點,達(dá)到縮容的目的。MRS通過后臺一系列算法智能的選擇當(dāng)前最合適的節(jié)點進(jìn)行縮容,更好的實現(xiàn)用戶的訴求。
支持創(chuàng)建TaskNode節(jié)點,只作為計算節(jié)點,不存放持久化的數(shù)據(jù),是實現(xiàn)彈性伸縮的基礎(chǔ)。在MRS服務(wù)只作為計算資源的場景下,使用TaskNode節(jié)點可以節(jié)省成本,并可以更加方便快捷地對集群節(jié)點進(jìn)行擴(kuò)縮容,滿足用戶對集群計算能力隨時增減的需求。
支持創(chuàng)建集群時非Master節(jié)點配置多磁盤,能夠?qū)⒓褐邢鄳?yīng)服務(wù)(如HDFS、Kafka等)的數(shù)據(jù)目錄分散到多塊磁盤上去,以滿足服務(wù)對磁盤讀寫速度和集群的存儲能力的要求,從而提升集群的運行效率,給予用戶更好的使用體驗。
支持開源Hbase 1.3.1版本,包括Region Replicas、Date based tiered compaction、Multi WAL、REST API等新特性,在離線數(shù)據(jù)的實時讀取、按時間戳批量查詢等場景下性能有了較大的提升,支持使用REST對HBASE進(jìn)行業(yè)務(wù)操作。
MRS版本新發(fā)布了低配置集群。用戶在對內(nèi)存、CPU資源需求較低的場景時,可以創(chuàng)建低配置集群,使用低配置集群能大大降低使用MRS的成本,按需付費最高節(jié)省60%,包年包月最高節(jié)省58%。
MRS 版本新優(yōu)化了MRS集群的創(chuàng)建邏輯,使整個集群創(chuàng)建耗時減少為原來的一半,用戶體驗更好。
MRS 版本支持Maven倉庫,開發(fā)人員可以直接在公網(wǎng)上下載到MRS組件的jar包來進(jìn)行二次開發(fā),大大提高了開發(fā)人員開發(fā)項目的自動化構(gòu)建能力。使用指導(dǎo)可參見華為云幫助中心:? http://support.huaweicloud.com/devg-mrs/mrs_06_0002.html。
MRS支持實時地主動給用戶發(fā)送短信和郵件,來通知集群變更結(jié)果以及大數(shù)據(jù)平臺的告警信息,如:HDFS、Hive、Yarn等服務(wù)不可用,節(jié)點故障等。讓用戶及時感知風(fēng)險,降低損失。
當(dāng)您購買了MRS包周期集群后,在訂購的周期之內(nèi),您的業(yè)務(wù)增長超過預(yù)期時,就會出現(xiàn)超出包周期訂單規(guī)模外的擴(kuò)容訴求,MRS服務(wù)支持包周期集群擴(kuò)容能力,做到了在輕松幫助您完成擴(kuò)容的前提下,讓您繼續(xù)享受著包周期的優(yōu)惠。
您只需要在您業(yè)務(wù)需要的時候,打開MRS服務(wù)頁面,點兩下鼠標(biāo),便可擴(kuò)容出您需要的節(jié)點數(shù)。整個擴(kuò)容過程無需后臺人工介入,只需幾分鐘,即可完美解決您遇到的日益上漲的業(yè)務(wù)數(shù)據(jù)壓力。
MRS提供標(biāo)準(zhǔn)的云上彈性大數(shù)據(jù)集群,目前可安裝部署包括hadoop、spark等9種大數(shù)據(jù)組件,提供包括接入、實時計算、緩存、存儲、批量計算的數(shù)據(jù)全生命周期服務(wù)。MRS在和客戶的交流中發(fā)現(xiàn),標(biāo)準(zhǔn)的大數(shù)據(jù)集群不能滿足所有客戶需求,有些客戶需要安裝自身業(yè)務(wù)所需的軟件工具或運行環(huán)境,有些用戶根據(jù)自身業(yè)務(wù)對大數(shù)據(jù)組件包做了修改,有些用戶需要其他MRS還未支持的大數(shù)據(jù)組件。因此,MRS提供了自定義引導(dǎo)操作,用戶可以以此為入口靈活配置自己的集群,通過引導(dǎo)操作用戶可以自動化地完成:
引導(dǎo)操作是指啟動集群組件前(或后)在指定的節(jié)點上執(zhí)行腳本。您可以通過引導(dǎo)操作來完成安裝MRS還沒支持的第三方軟件,修改集群運行環(huán)境等自定義操作。如果集群擴(kuò)容,選擇執(zhí)行引導(dǎo)操作,則引導(dǎo)操作也會以相同方式在新增節(jié)點上執(zhí)行。
10月10日-12日在上海舉行的華為全聯(lián)接大會上,大家將有機(jī)會全面接觸華為云EI·MapReduce解決方案,體驗MRS帶來的全興使用感受。