??△?DataPipeline榮獲科技創(chuàng)新獎(jiǎng)

??主論壇中,DataPipeline合伙人&CPO陳雷發(fā)表《實(shí)時(shí)數(shù)據(jù)管理,下一代金融數(shù)字化創(chuàng)新基礎(chǔ)設(shè)施》的主題演講,他表示:“新一代技術(shù)的爆發(fā)式增長(zhǎng)正在推動(dòng)整個(gè)產(chǎn)業(yè)生態(tài)加速發(fā)展,作為銀行數(shù)字化創(chuàng)新基礎(chǔ)設(shè)施的數(shù)據(jù)管理技術(shù)也在不斷進(jìn)化。其中,實(shí)時(shí)數(shù)據(jù)管理平臺(tái)成為十分必要且重要的組成部分,預(yù)測(cè)將來(lái)會(huì)進(jìn)一步被擴(kuò)展為全銀行綜合性平臺(tái)。DataPipeline企業(yè)級(jí)實(shí)時(shí)數(shù)據(jù)融合平臺(tái)可以幫助用戶(hù)把多源異構(gòu)數(shù)據(jù)庫(kù)之間的實(shí)時(shí)的數(shù)據(jù)流打通,極大降低了用戶(hù)自建的時(shí)間精力和難度,而自建預(yù)計(jì)時(shí)間能達(dá)到6～8個(gè)月?！?/p>

??▲銀行業(yè)數(shù)據(jù)管理技術(shù)發(fā)展歷程

??對(duì)此,陳雷分享了DataPipeline的深入思考和實(shí)踐經(jīng)驗(yàn)。據(jù)介紹,DataPipeline實(shí)時(shí)數(shù)據(jù)融合平臺(tái)具備以下四大特點(diǎn):

??1.?支持主流關(guān)系型數(shù)據(jù)、大數(shù)據(jù)平臺(tái)及國(guó)產(chǎn)數(shù)據(jù)庫(kù)

??支持例如Oracle實(shí)時(shí)日志解析的數(shù)據(jù)同步、DB2等主流數(shù)據(jù)庫(kù),openGauss、TiDB、SequoiaDB巨杉等國(guó)產(chǎn)數(shù)據(jù)庫(kù),同時(shí)支持包括星環(huán)大數(shù)據(jù)平臺(tái)等數(shù)據(jù)庫(kù)管理技術(shù)和API等的其他數(shù)據(jù)接口類(lèi)型。

??2.?配置式鏈路定義,無(wú)代碼任務(wù)構(gòu)建提升實(shí)時(shí)數(shù)據(jù)敏捷性

??使用分層管理、按需服務(wù)的配置型平臺(tái)來(lái)提升?IT?敏捷開(kāi)發(fā)效率。產(chǎn)品采用B/S架構(gòu),全頁(yè)面化配置,數(shù)據(jù)融合任務(wù)的研發(fā)交付時(shí)間低至5分鐘。一方面保證數(shù)據(jù)節(jié)點(diǎn)的安全性、穩(wěn)定性、業(yè)務(wù)連續(xù)性,一方面為數(shù)據(jù)應(yīng)用提供更多的自主性,使用戶(hù)可以將數(shù)據(jù)獲取的范圍、數(shù)據(jù)任務(wù)的生命周期、系統(tǒng)資源投入的多寡等權(quán)限更多地交給實(shí)際使用數(shù)據(jù)的業(yè)務(wù)部門(mén)及應(yīng)用開(kāi)發(fā)人,從而在業(yè)務(wù)需求變化時(shí)從容應(yīng)對(duì),加速達(dá)成數(shù)字化轉(zhuǎn)型目標(biāo)。

??3.?豐富全面的運(yùn)維監(jiān)控與管理守護(hù)任務(wù)穩(wěn)定運(yùn)行

??通過(guò)任務(wù)監(jiān)控模塊監(jiān)控系統(tǒng)級(jí)任務(wù)運(yùn)行狀態(tài),支持提供圖形化的監(jiān)控頁(yè)面,支持重要任務(wù)、故障任務(wù)監(jiān)控、性能監(jiān)控、關(guān)注任務(wù)的實(shí)時(shí)監(jiān)控、同步延遲監(jiān)控、表級(jí)別數(shù)據(jù)量監(jiān)控與核對(duì);豐富的系統(tǒng)級(jí)任務(wù)運(yùn)行統(tǒng)計(jì)與任務(wù)級(jí)實(shí)時(shí)運(yùn)行報(bào)告,報(bào)表可按照任務(wù)、系統(tǒng)等維度進(jìn)行統(tǒng)計(jì)及展現(xiàn)、導(dǎo)出等功能;靈活豐富的運(yùn)行控制配置滿(mǎn)足各類(lèi)場(chǎng)景要求,讀取寫(xiě)入限制降低源目標(biāo)壓力、資源組保障重要任務(wù)運(yùn)行、任務(wù)分組方便管理。

??4.?分布式引擎、組件級(jí)高可用保障實(shí)時(shí)鏈路穩(wěn)定高容錯(cuò)

??融合引擎采用分布式架構(gòu),容器化部署?？梢员ＷC系統(tǒng)業(yè)務(wù)連續(xù)性要求。在分布式集群的基礎(chǔ)上,采用系統(tǒng)資源組的形式隔離不同任務(wù)的運(yùn)行環(huán)境,保障重要任務(wù)的穩(wěn)定有序運(yùn)行。

??此次榮獲銀行數(shù)字化科技創(chuàng)新獎(jiǎng),是銀行業(yè)界對(duì)DataPipeline在行業(yè)做出突出貢獻(xiàn)的重要表彰。DataPipeline自成立以來(lái),不忘初心,始終專(zhuān)注于實(shí)時(shí)數(shù)據(jù)融合領(lǐng)域,至今已服務(wù)了中國(guó)人壽、民生銀行、山東城商行聯(lián)盟、財(cái)通證券、中國(guó)石油、吉利集團(tuán)、星巴克、順豐等在各自行業(yè)信息化水平領(lǐng)先的客戶(hù)。憑借業(yè)內(nèi)領(lǐng)先的技術(shù)、卓越的產(chǎn)品表現(xiàn)和成熟的行業(yè)解決方案,DataPipeline獲得「A100數(shù)智中國(guó)榜:TOP企業(yè)IT基礎(chǔ)設(shè)施數(shù)智化方案」、「DTCC:年度技術(shù)卓越獎(jiǎng)」、「創(chuàng)新互聯(lián)網(wǎng)企業(yè)TOP100」、「大數(shù)據(jù)產(chǎn)業(yè)創(chuàng)新服務(wù)產(chǎn)品」等榮譽(yù)。

??▲DataPipeline部分用戶(hù)展示

??未來(lái),DataPipeline將繼續(xù)深化自身在實(shí)時(shí)數(shù)據(jù)融合領(lǐng)域的研究,持續(xù)助力多行業(yè)用戶(hù)數(shù)字化轉(zhuǎn)型?！拔覀兎浅?zhuān)注這一件事,就是打造實(shí)時(shí)數(shù)據(jù)處理中間件產(chǎn)品。基于數(shù)十人的專(zhuān)職研發(fā)團(tuán)隊(duì)成果及阿里、華為、騰訊等產(chǎn)業(yè)上下游合作伙伴的生態(tài)力量,我們現(xiàn)已基本可以替代傳統(tǒng)外商的實(shí)時(shí)數(shù)據(jù)采集技術(shù)。”陳雷表示。

zhangnn