PB級的視頻監(jiān)控數據,給數據存儲帶來了挑戰(zhàn)
據統(tǒng)計,截至2016年中國前端攝像頭出貨量已達到4338萬臺,而同時出于換機市場和增量市場的雙輪驅動,國內監(jiān)控攝像頭的銷售市場還在不斷擴張,預計在2020年出貨量會達到5422萬臺;僅視頻監(jiān)控錄像每天的數據量就達上千PB,累積的歷史數據則將更為龐大。這為視頻監(jiān)控供應商與存儲廠商帶來了巨大機遇。
而隨著監(jiān)控點位的驟增和視頻數據的爆炸式增長,過去簡單利用人海戰(zhàn)術進行檢索和分析已經很難滿足新時代的安防工作需求,新興的人工智能(AI)為此帶來了新的解決方案,通過視頻回看進行人工查證的傳統(tǒng)方式正在轉向以智能搜索、特征搜索為核心的智能查證方式。據第三方統(tǒng)計,智能應用使得破案線索排查效率提升數十到數百倍,而這智能應用對于安防解決方案供應商也提出了更高的能力要求。
存得穩(wěn)、查得快
成立于2000年、多次入選”安防十大品牌”的深圳英飛拓科技股份有限公司(簡稱英飛拓)面對智能監(jiān)控的發(fā)展趨勢,提出了“人物互聯,智慧驅動”的戰(zhàn)略方向,著力打通線上線下,構建視頻新業(yè)務模式,為客戶提供全面高質量的服務,其產品由傳統(tǒng)的矩陣、快球、光端機,演變?yōu)榧浖脚_、智能IPC、IP光網傳輸系統(tǒng)以及IP存儲設備為一體的整體解決方案,并滿足多元化的感知、車輛管理、電梯(扶梯)異常監(jiān)測、火災防范、視頻巡更等多方面安防的共性需求。
作為安防領域知名品牌的英飛拓,和浪潮存儲聯合打造的安防領域解決方案。這無疑代表著雙方合作的不斷加強,對于未來安防市場發(fā)展具有深遠的意義。
之所以走上強強聯合的道路,英飛拓產品合作部總監(jiān)皮玉華表示,在AI應用發(fā)展起來以后,對存儲有了更高的要求:首先是要存的穩(wěn),第二是要查的快,也就是要有更快的響應速度和更高的可靠性。這驅使英飛拓尋找到浪潮這樣在存儲技術上有深厚積淀的公司進行合作。
浪潮存儲產品部總經理孫鋼表示:“近幾年視頻行業(yè)發(fā)展迅速,浪潮存儲在整個行業(yè)的場景化應用上找到了一些新的技術點,通過與英飛拓這樣的優(yōu)秀方案商的緊密合作,對解決方案進行優(yōu)化、完善,可以更快地切入行業(yè)、服務用戶,這是雙方合作的動力?!?/p>
從技術上看,安防的智能化把原來非結構化的視頻數據變?yōu)榘虢Y構化或者結構化的數據。例如,如果識別了一個人的特征,就會產生一個特征碼,而每個人的圖片大小不一樣,就變成了半結構化的數據。沒有結構化或者是半結構化的數據,文件的檢索速度就快不起來。而如果既想滿足非結構化視頻數據的海量存儲需求,又要滿足結構化和半結構化數據的快速查詢與分析功能,只有分布式存儲才能做到求。
在英飛拓與浪潮合作解決方案中,應用的正是浪潮的軟件定義存儲AS13000。AS13000通過對商用存儲各類服務器平臺的兼容,實現了存儲系統(tǒng)對橫向無限擴展的支持,能夠滿足用戶視頻監(jiān)控業(yè)務對存儲空間容量和性能的線性擴展。
浪潮軟件定義存儲系統(tǒng)AS13000
首先,系統(tǒng)實現存儲性能線性擴展。AS13000支持的ICFS是浪潮創(chuàng)新研發(fā)的軟件定義存儲文件系統(tǒng),采用了元數據集群和節(jié)點間數據冗余等去中心化的技術,讓系統(tǒng)的數據和元數據分布在各個節(jié)點上,從而消除了性能瓶頸,使存儲容量和計算能力隨節(jié)點數的增加而線性增加。ICFS還提供了全局一致的緩存,讓緩存容量隨著節(jié)點的增加而線性增長,同時使得全局緩存的容量也隨之增長,并且增大了熱點數據的命中率,由此提高了整體系統(tǒng)的性能。
其次,通過超高存儲性能支撐AI應用。作為scale-out(橫向擴展)架構的軟件定義存儲,AS13000通過小文件IO聚合、IO路徑優(yōu)化、網絡延遲優(yōu)化、全閃介質采用、網絡延遲優(yōu)化(RDMA)、元數據與數據操作控制、目錄分片等技術實現超高性能,以幫助視頻監(jiān)控行業(yè)實現AI集群分析應用。
再次,通信速度提升4-6倍。AS13000還通過內部IB組網配置方案,實現更高的通信速度,達到以往4-6倍的速率;它支持RDMA(Remote Direct Memory Across),實現了低延遲,高性能的數據傳輸。
此外,系統(tǒng)能夠全面平衡業(yè)務壓力。AS13000采用了自動負載均衡解決方案,使得集群中各節(jié)點之間的業(yè)務壓力基本相當,以支持最常用的輪詢和根據業(yè)務需求基于連接數的均衡策略。
可以說,浪潮軟件定義海量存儲系統(tǒng)AS13000以領先技術為安防行業(yè)場景化解決方案滿足了數據存儲的容量、性能、與易管理需求,構建了穩(wěn)定的視頻監(jiān)控存儲大平臺。
場景化調優(yōu)和打磨
當然,如何把產品技術與應用完美結合起來,還有很長的一段路要走,而這正是浪潮與英飛拓合作的意義。
“我們跟浪潮的合作,不是一個簡單地拿浪潮的硬件和我們的軟件裝上去就行了,而是需要對二者之間進行非常多的調優(yōu)?!逼び袢A說。為此,兩家廠商聯合成立了項目組,專門抽出研發(fā)人員針對英飛拓的監(jiān)控軟件平臺一起來做存儲系統(tǒng)的配合、調優(yōu)、測試、安裝,由此滿足不同客戶的場景化需求。
孫鋼則表示,與英飛拓的合作特別磨煉浪潮存儲對視頻監(jiān)控場景化解決方案優(yōu)化的速與能力?!半m然這樣做特別消耗人力,每個場景都需要投入很多研發(fā)資源,但是很有意義,當我們切切實實做好時,會比單打獨斗方式進步快得多。”
的確,人工智能迅猛發(fā)展,單打獨斗的時代將成為過去,浪潮將不斷與英飛拓這樣的在所屬領域有豐富經驗的伙伴攜手,共同拓展安防市場,構建智慧城市生態(tài)。