同時(shí)全新推出的批流一體/實(shí)時(shí)能力進(jìn)一步擴(kuò)寬了全場(chǎng)景 OLAP 的能力,僅通過(guò)一個(gè)數(shù)據(jù)模型、一個(gè) SQL 語(yǔ)句,就能同時(shí)接入批數(shù)據(jù)和流數(shù)據(jù),對(duì)數(shù)據(jù)應(yīng)用提供統(tǒng)一的查詢出口。
Kyligence 新版本完善了企業(yè)級(jí)運(yùn)維管理體系,幫助企業(yè)實(shí)現(xiàn)多租戶部署與管理,通過(guò)指標(biāo)監(jiān)控、告警等實(shí)現(xiàn)自動(dòng)化生產(chǎn)運(yùn)維。此外,本次發(fā)布還增強(qiáng)了統(tǒng)一的業(yè)務(wù)語(yǔ)義層能力,并全新支持了華為云。
智能分層存儲(chǔ) Smart Tiered Storage?? Apache Kylin 和 ClickHouse 的有機(jī)融合
融合 Apache Kylin 和 ClickHouse 的技術(shù)優(yōu)勢(shì),是 Kyligence 最新版本中全場(chǎng)景 OLAP 的核心,通過(guò) Kyligence 智能分層存儲(chǔ)(Smart Tiered Storage??)技術(shù),將 ClickHouse 有機(jī)融合在 Kyligence 產(chǎn)品的基座中,在原有聚合分析的高性能之上,更有效提升了明細(xì)分析、Ad-Hoc 查詢等場(chǎng)景的性能和優(yōu)勢(shì)。
Kyligence 能夠?yàn)橛脩籼峁┤娴?OLAP 服務(wù)能力,甚至進(jìn)一步提供對(duì) ClickHouse 的商業(yè)化支持。該功能同時(shí)在企業(yè)版(Kyligence Enterprise)和公有云版本(Kyligence Cloud)中提供。
基于 SSB 數(shù)據(jù)集上的性能測(cè)試結(jié)果,使用分層存儲(chǔ)之后,Kyligence 4.5 版本在明細(xì)場(chǎng)景有 5 倍性能提升,在 Ad-Hoc 場(chǎng)景有 1.6 倍性能提升。
Kyligence Enterprise 提供了基于 HDFS/對(duì)象存儲(chǔ)和 MPP 引擎的兩級(jí)存儲(chǔ)設(shè)計(jì),引入了查詢性能強(qiáng)大的 ClickHouse,顯著提升了超多維度靈活分析和明細(xì)查詢分析的性能, 搭配預(yù)計(jì)算和 AI 增強(qiáng)引擎,可以全面覆蓋各類分析場(chǎng)景,為企業(yè)的精細(xì)化運(yùn)營(yíng)和輔助商業(yè)決策帶來(lái)更大的助力。
同時(shí)分層存儲(chǔ)可經(jīng)由統(tǒng)一的模型來(lái)管理數(shù)據(jù),從而無(wú)縫對(duì)接主流商業(yè) BI 工具,用戶無(wú)需維護(hù)復(fù)雜的數(shù)據(jù)平臺(tái),只需要根據(jù)業(yè)務(wù)需求進(jìn)行建立模型,大幅度地減少建模和模型調(diào)優(yōu)階段的人力成本支出和時(shí)間成本支出,并可獲得統(tǒng)一的查詢分析體驗(yàn)。
批流一體/實(shí)時(shí):一個(gè)數(shù)據(jù)模型、一個(gè) SQL 語(yǔ)句,同時(shí)接入批數(shù)據(jù)和流數(shù)據(jù)
在企業(yè)中會(huì)經(jīng)常遇到需要對(duì)數(shù)據(jù)進(jìn)行實(shí)時(shí)監(jiān)控的場(chǎng)景,或在業(yè)務(wù)發(fā)生時(shí)及時(shí)對(duì)當(dāng)前業(yè)務(wù)情況和歷史情況的分析,比如反欺詐、實(shí)時(shí)營(yíng)銷監(jiān)控等場(chǎng)景,這時(shí)企業(yè)的數(shù)據(jù)團(tuán)隊(duì)需要支撐業(yè)務(wù)的此類分析場(chǎng)景,從而提升業(yè)務(wù)決策效率。
Kyligence 4.5 提供了基于 Spark 的實(shí)時(shí)處理引擎以及批流一體分析能力,進(jìn)一步擴(kuò)寬了全場(chǎng)景 OLAP 的能力。僅通過(guò)一個(gè)數(shù)據(jù)模型、一個(gè) SQL 語(yǔ)句,就能同時(shí)接入批數(shù)據(jù)和流數(shù)據(jù),對(duì)數(shù)據(jù)應(yīng)用提供統(tǒng)一的查詢出口,進(jìn)行分鐘級(jí)別的純實(shí)時(shí)數(shù)據(jù)分析或批流融合的分析,可支持企業(yè)對(duì)于實(shí)時(shí)數(shù)據(jù)的監(jiān)控,或歷史數(shù)據(jù)和實(shí)時(shí)數(shù)據(jù)的融合分析,這都是企業(yè)亟需的分析能力。
在其他方案中,企業(yè)需要維護(hù)兩套方案來(lái)分別支撐歷史數(shù)據(jù)的分析和實(shí)時(shí)數(shù)據(jù)的分析。而使用 Kyligence Enterprise 4.5 提供的批流融合能力,IT 部門(mén)僅需要維護(hù)一套架構(gòu)就可以同時(shí)支撐業(yè)務(wù)對(duì)批和流數(shù)據(jù)的分析,有效降低了架構(gòu)復(fù)雜度和運(yùn)維開(kāi)發(fā)成本。
注:公有云版本 Kyligence Cloud 暫不支持 Kyligence 實(shí)時(shí)功能,預(yù)期 2021 年 Q4 發(fā)布
AI 增強(qiáng)引擎:自動(dòng)化建模,靈活響應(yīng)業(yè)務(wù)
基于 AI 增強(qiáng)引擎,Kyligence 能夠根據(jù)業(yè)務(wù)分析行為自動(dòng)推薦數(shù)據(jù)模型,幫助企業(yè)從海量的分析負(fù)載中識(shí)別和沉淀數(shù)據(jù)資產(chǎn),并根據(jù)業(yè)務(wù)變化智能更新模型,實(shí)現(xiàn)自動(dòng)化建模和管理。除此之外,AI 增強(qiáng)引擎還能夠自動(dòng)清理低效存儲(chǔ),不斷優(yōu)化 TCO。
統(tǒng)一的業(yè)務(wù)語(yǔ)義層:多應(yīng)用復(fù)用,統(tǒng)一受治理的業(yè)務(wù)口徑
在不同 BI 工具中創(chuàng)建割裂的數(shù)據(jù)模型結(jié)構(gòu),會(huì)給企業(yè)帶來(lái)不必要的數(shù)據(jù)分復(fù)雜度和業(yè)務(wù)指標(biāo)定義的不一致。統(tǒng)一語(yǔ)義層給使用任何分析工具的所有用戶提供了統(tǒng)一一致的業(yè)務(wù)指標(biāo)和語(yǔ)義定義,減少了業(yè)務(wù)定義不一致所帶來(lái)的數(shù)據(jù)口徑問(wèn)題。
在本次發(fā)布中,我們?nèi)轮С滞秸Z(yǔ)義層到 Power BI, 使用 Power BI 的業(yè)務(wù)分析人員也可以和其他用戶一樣消費(fèi)相同的業(yè)務(wù)定義。
數(shù)據(jù)平臺(tái)的管理人員可以在 Kyligence 中定義統(tǒng)一的語(yǔ)義層,業(yè)務(wù)人員可以在不同的 Power BI 以及 Power BI Service 中復(fù)用語(yǔ)義層上的信息,而不需要關(guān)心底層技術(shù)上是如何定義的,指標(biāo)的計(jì)算邏輯如何。
企業(yè)級(jí)運(yùn)維管理
與此同時(shí),本次我們發(fā)布用于本地部署的運(yùn)維及管理工具 Kyligence Manager 4.5,為客戶提供完善的企業(yè)級(jí)運(yùn)維管理體系。使用 Kyligence Manager,客戶可以完成 Kyligence Enterprise、Kyligence Insight、Kyligence MDX 的運(yùn)維管理、監(jiān)控告警和使用統(tǒng)計(jì)等功能,幫助運(yùn)維人員快速完成集群部署、運(yùn)維管理、集群監(jiān)控告警、運(yùn)營(yíng)統(tǒng)計(jì),實(shí)現(xiàn)企業(yè)級(jí)集群的運(yùn)維與管理。
支持多個(gè)云平臺(tái)
Kyligence 現(xiàn)已支持微軟云 Azure、亞馬遜云 AWS、華為云等公有云平臺(tái),并提供了云平臺(tái)模版部署、云市場(chǎng)部署,和 Kyligence 門(mén)戶網(wǎng)站部署等多種部署方式。企業(yè)可以根據(jù)自身需求進(jìn)行靈活選擇。
隨著云原生技術(shù)的不斷成熟,以及企業(yè)對(duì)私有云架構(gòu)的需求高漲,Kyligence 將進(jìn)一步加速云原生布局的步伐,充分發(fā)揮已有的技術(shù)積累,賦能企業(yè)加速實(shí)現(xiàn)數(shù)據(jù)上云。
Kyligence 4.5 系列網(wǎng)絡(luò)研討會(huì)報(bào)名正式開(kāi)啟!
關(guān)于 Kyligence
Kyligence 由 Apache Kylin 創(chuàng)始團(tuán)隊(duì)創(chuàng)建,致力于打造下一代智能數(shù)據(jù)云平臺(tái),為企業(yè)實(shí)現(xiàn)自動(dòng)化的數(shù)據(jù)服務(wù)和管理?;跈C(jī)器學(xué)習(xí)和 AI 技術(shù),Kyligence 從多云的數(shù)據(jù)存儲(chǔ)中識(shí)別和管理最有價(jià)值數(shù)據(jù),并提供高性能、高并發(fā)的數(shù)據(jù)服務(wù)以支撐各種數(shù)據(jù)分析與應(yīng)用,同時(shí)不斷降低 TCO。Kyligence 已服務(wù)中國(guó)、美國(guó)及亞太的多個(gè)銀行、保險(xiǎn)、制造、零售等客戶,包括建設(shè)銀行、浦發(fā)銀行、招商銀行、平安銀行、寧波銀行、太平洋保險(xiǎn)、中國(guó)銀聯(lián)、上汽、一汽、安踏、YUM、Costa、UBS、Metlife、AppZen 等全球知名企業(yè)和行業(yè)領(lǐng)導(dǎo)者。公司已通過(guò) ISO9001,ISO27001 及 SOC2 Type1 等各項(xiàng)認(rèn)證及審計(jì),并在全球范圍內(nèi)擁有眾多生態(tài)合作伙伴。