不同于很多大型央企,組建于2014年的中國鐵塔公司的信息化系統(tǒng)始建之初就構建在天翼云、華為云和聯(lián)通云等云服務的基礎上,生來就是云公司,沒有很多央企傳統(tǒng)應用系統(tǒng)的包袱。盡管如此,應用中他們也遭遇了數據及時交付的難題。
數據交付效率難題
中國鐵塔實施的是”一體兩翼”的策略,以面向行業(yè)內塔類與室分業(yè)務為”一體”,以基于站址資源社會化共享業(yè)務、面向社會專業(yè)化備電保障服務為”兩翼”,如今已經發(fā)展培育了多點支撐的業(yè)務增長格局。
中國鐵塔根據需要,目前已經構建了大大小小130多個信息化應用系統(tǒng),涉及5000多臺虛擬機以及大約7PB數據存儲容量。
這100多個包括生產系統(tǒng)、準生產系統(tǒng)、開發(fā)驗收以及測試系統(tǒng)。根據需要,以每3個月左右為周期,定期要向開發(fā)/測試系統(tǒng)提交生產數據,每一次數據交付周期,都讓專業(yè)技術人員大費周章。
據了解,為了盡可能減少對生產系統(tǒng)性能的干擾,傳統(tǒng)獲取數據的方式,要借助準生產系統(tǒng)恢復備份數據,然后提交生產/測試系統(tǒng)使用。這個過程主要依靠手工完成,效率不高,大約需要1個月左右時間,加班加點才能完成,由于依靠備份數據,這些數據不能完全貼合業(yè)務的實時狀況。
有數據顯示:一份生產系統(tǒng)數據,在企業(yè)內部往往會有10多個數據副本,供容災、測試、開發(fā)以及數據分析等使用。對這些副本數據缺乏行之有效管理,存在很多安全管理的漏洞,很多泄密事件系由此產生。中國鐵塔沒有那么多數據副本,但是開發(fā)/測試\驗收對數據還是有周期性需求,所涉及系統(tǒng)眾多,因此存在數據及時交付的問題。
經過多方技術調研,中國鐵塔引入了上海上訊ADM (Agile Data Management,敏捷數據管理平臺)。采用新的系統(tǒng),原本需要6人1月的工作量,最多一周就可完成,有時候2天就可完成工作量,數據實時性也得到保障,難題迎刃而解,開發(fā)/測試部門滿意度顯著提升。
揭秘ADM系統(tǒng)
讓人交口稱贊ADM是怎樣一個系統(tǒng)呢?
ADM是一套綜合數據治理解決方案,它采用數據庫虛擬化等核心技術,保障業(yè)務數據高效使用、安全管控以及合規(guī)審計,由生產數據管理、備份數據管理、敏感數據管理、測試數據管理、數據訪問管理五部分組成,可以解決數據備份與恢復、備份數據自動化恢復與有效性驗證、靜態(tài)數據脫敏、測試數據多副本快速交付、數據庫權限訪問控制與動態(tài)脫敏以及多場景融合下的實際問題。
在中國鐵塔案例中大顯身手的就是測試數據多副本快速交付系統(tǒng),所謂拷貝數據管理(CDM)系統(tǒng),它通過數據庫虛擬化技術獲取、存儲與生成生產數據副本,借助原始數據存儲,虛擬數據庫掛載等技術,實現數據快速交付、集中管控,以及中間數據存儲、流轉等目標。
需要格外關注的是,CDM系統(tǒng)不僅交付數據,同時也交付了一套完整存儲系統(tǒng),供開發(fā)/測試等業(yè)務部門使用,實現了數據集中管控,從而擺脫了單純數據拷貝引發(fā)的失控問題。
據了解,CDM提交的這個存儲系統(tǒng),內置了獨有的壓縮比高達4:1的高效壓縮存儲池,存儲即壓縮,數據存儲成本效率高。要知道傳統(tǒng)數據交付,企業(yè)也需要占用磁盤等存儲空間,副本越多,容量越大,越分散,這同樣占用企業(yè)資金。
如今,透過集中管控的存儲系統(tǒng),上海上訊ADM專利技術能夠做到一份基礎數據源,應對多種業(yè)務系統(tǒng)的需要,ADM可快速拉起多份虛擬數據庫供不同系統(tǒng)使用,彼此之間可獨立讀/寫操作,其內置的智能讀/寫緩存機制,不僅解決系統(tǒng)并行操作使用的壓力,同時保障數據完整和安全使用。
通常情況下,ADM可將TB量級數據庫在分鐘級拉起,滿足開發(fā)/測試、查詢分析、合規(guī)審計、應急容災等業(yè)務的需要。
由于采用了集中式數據存儲系統(tǒng),在數據管理上,ADM就能夠提供可視化虛擬數據庫拓撲結構圖,對系統(tǒng)全局數據使用關系提供預覽,讓測試數據的組織機構、優(yōu)化測試數據的資源分配等一目了然;ADM提供的虛擬數據庫資源分組管理,可實現同組人員數據操作權限共享、測試數據庫分類管理等功能;其測試數據版本管理,可跟蹤數據流向,識別虛擬數據庫使用狀態(tài),實時拍攝快照,實現數據版本的保留,數據的回退或切換,讓數據版本管理更加靈活。
冰山一角而已
在中國鐵塔案例應用中,上海上訊ADM旗開得勝,馬到成功。但是青出于藍勝于藍,這不過是小試牛刀,冰山一角而已,ADM的驚喜遠非如此。
CDM能夠解決的不僅是數據交付,也具有數據備份與恢復、備份數據自動化恢復與有效性驗證、靜態(tài)數據脫敏、以及數據庫權限訪問控制與動態(tài)脫敏等多種功能,依托大數據和人工智能,未來也可以增加數據分析的功能,為數據業(yè)務創(chuàng)新提供支持!
在傳統(tǒng)信息化系統(tǒng)布局中,生產系統(tǒng)、辦公管理等核心系統(tǒng)之外,容災備份、開發(fā)/測試,以及數據分析等屬于輔助系統(tǒng),企業(yè)根據實際情況分散建設,缺乏全局統(tǒng)籌規(guī)劃和管理。但是隨著數字化轉型,數字經濟的備受關注,輔助系統(tǒng)的重要性不斷提升。
統(tǒng)籌規(guī)劃輔助業(yè)務系統(tǒng)的技術也已經成熟,所謂第二存儲,簡單說就是透過一個集中式的系統(tǒng),同時滿足容災備份、開發(fā)、測試和數據分析等輔助業(yè)務系統(tǒng)的需求,變分散為集中,集中調度,集中管理。上海上訊ADM就是其中的佼佼者之一。
全面推廣和使用ADM可能嗎?
推廣ADM的難題不在技術上,技術已經非常成熟,難在觀念上,需要突破人的固有觀念。
長久以來,習慣了現有的應用方式,以容災為例,已經習慣用備份、數據復制的方式來實現容災,也有行業(yè)等保條例的要求。很多業(yè)務系統(tǒng)也是按照這個節(jié)奏逐步發(fā)展成熟?,F在需要我們改變這種方式,挑戰(zhàn)就是顯而易見的。
不求有功但求無過的禁錮,讓我們難以突破。
但是這種突破帶來的價值是顯而易見的,無論容災保護速度、水平,還是DevOps、數據創(chuàng)新與分析,AI應用,完全架構在一個統(tǒng)一的數據架構基礎上集中管理,安全性、效率完全得到保障。
突破也不意味著推動重建,以一個問題作為突破口,由點到面,逐步發(fā)展,類似農村包圍城市的道路,也不是一種最明智的選擇!
無論如何,ADM的新機遇已經到來。
小結
數字經濟時代,圍繞著數據這個核心創(chuàng)新業(yè)務發(fā)展,必將成為發(fā)展的關鍵環(huán)節(jié)。新時期,不僅需要新的技術方法,更需要視野和勇氣!數據交付不過是冰山一角,還有更多的金礦有待發(fā)掘,這是一個數據創(chuàng)新的時代!