阿明 發(fā)表于:13年10月29日 11:21 [原創(chuàng)] DOIT.com.cn
2013年10月29日存儲在線原創(chuàng):一個公司的誕生對整個IT業(yè)界都是一次大大的刺激與促進,對于這樣一家定位下一代云計算和大數(shù)據(jù)應(yīng)用相結(jié)合的公司,傾注了老喬(Joe Tucci)為首的EMC高層決策團的睿見與前瞻。
從當(dāng)初成立伊始將VMware前任CEO、EMC首席戰(zhàn)略官Paul Maritz換將到Pivotal,EMC和VMware共同出資成立的公司(通用電氣也有1.05億美元左右的戰(zhàn)略投資)被國內(nèi)媒體業(yè)界譽為EMC集團軍的三駕馬車之一。(另兩駕馬車:軟件定義數(shù)據(jù)中心的VMWare和信息基礎(chǔ)架構(gòu)的原EMC)
“據(jù)Paul Maritz透露,2013年P(guān)ivotal的銷售收入預(yù)計為3億美元,2017年有望達到10億美元。同時2013~2014年P(guān)ivotal將獲得約4億美元的投資。” Pivotal在既定目標的推動下,近來也傳出“忙于打造大數(shù)據(jù)軟件組合”——組合數(shù)據(jù)挖掘和數(shù)據(jù)分析軟件產(chǎn)品。
作為下狠心要鍛造自己的業(yè)務(wù)智能PaaS(平臺即服務(wù)),Pivotal在大數(shù)據(jù)軟件方面也強調(diào)如何有助于數(shù)據(jù)分析。大家都熟知的,內(nèi)存數(shù)據(jù)庫技術(shù)的應(yīng)用,可以大大提高數(shù)據(jù)庫的速度,這對于需要高速反應(yīng)的數(shù)據(jù)庫應(yīng)用,如電信、金融等提供了有力支撐。因此,在內(nèi)存數(shù)據(jù)庫的實時分析領(lǐng)域,就成為當(dāng)前在配合Hadoop平臺數(shù)據(jù)處理方面帶來很大的方便。
我們可以簡單了解一下內(nèi)存數(shù)據(jù)庫的價值所在,“內(nèi)存數(shù)據(jù)庫的技術(shù),一個很重要的特點,是可以對內(nèi)存中的數(shù)據(jù)實現(xiàn)全事務(wù)處理,這是僅僅把數(shù)據(jù)以數(shù)組等形式放在內(nèi)存中完全不同的。并且,內(nèi)存數(shù)據(jù)庫是與應(yīng)用無關(guān)的,顯然這種體系結(jié)構(gòu)具有其合理性。內(nèi)存引擎可以實現(xiàn)查詢與存檔功能使用的是完全相同的數(shù)據(jù)庫,同時內(nèi)存表與磁盤表也使用的是完全相同的存取方法。存儲的選擇,對于應(yīng)用開發(fā)者而言是完全透明的。”
相關(guān)資料顯示:對于內(nèi)存數(shù)據(jù)庫而言,實現(xiàn)了數(shù)據(jù)在內(nèi)存中的管理,而不僅僅是作為數(shù)據(jù)庫的緩存。不像其它將磁盤數(shù)據(jù)塊緩存到主存中的數(shù)據(jù)庫,內(nèi)存數(shù)據(jù)庫的內(nèi)存引擎使用了為隨機訪問內(nèi)存而特別設(shè)計的數(shù)據(jù)結(jié)構(gòu)和算法,這種設(shè)計使其避免了因使用排序命令而經(jīng)常破壞緩存數(shù)據(jù)庫性能的問題。通過內(nèi)存數(shù)據(jù)庫,減少了磁盤I/O,能夠達到了以磁盤I/O 為主的傳統(tǒng)數(shù)據(jù)庫無法與其相比擬的處理速度。
顯然,內(nèi)存數(shù)據(jù)庫在解決實時處理和高并發(fā)問題上,其意義還是非常大的。
作為Hadoop發(fā)行版升級Pivotal HD 1.1的一部分,其中還包括內(nèi)存交易庫GemFire HD(就是VMware在2010年收購的)。據(jù)其他媒體介紹,“GemFire實例完全是在服務(wù)器內(nèi)存中運行的,這樣可以迅速詢問實時SQL操作數(shù)據(jù),對于情況感知和其他形式的實時分析都是有用處的。”
另外,在新加坡的首屆Pivotal峰會上,Pivotal還在推出了幫助數(shù)據(jù)工作者發(fā)現(xiàn)和準備數(shù)據(jù)用于分析的工具——Pivotal Data Dispatch(Pivotal DD)。Pivotal DD是一款可擴展、經(jīng)濟實惠的解決方案,可整合查看不同的數(shù)據(jù)源,為報告和數(shù)據(jù)分析提供自助式沙箱配置。企業(yè)現(xiàn)在可以快速、安全地提供任何數(shù)據(jù)源,無論是Hadoop、MPP、平面文件還是傳統(tǒng)數(shù)據(jù)庫的結(jié)構(gòu)化和非結(jié)構(gòu)化大數(shù)據(jù),使數(shù)據(jù)工作者能夠?qū)崿F(xiàn)前所未有的數(shù)據(jù)分析高產(chǎn)出。采用Pivotal DD,企業(yè)就有了一個全面的系統(tǒng),可以查看、管理和分析組織內(nèi)部及外部數(shù)據(jù),更快做出決策,為企業(yè)開發(fā)出關(guān)鍵的數(shù)據(jù)洞察。
不過,據(jù)介紹,Pivotal Data Dispatch軟件的基礎(chǔ)是由紐約證券交易所(New York Stock Exchange,NYSE)開發(fā)的,從2007年開始他們的數(shù)據(jù)分析師利用這款軟件更好地了解監(jiān)管要求帶來的影響,也旨在為滿足監(jiān)管要求而跨多種數(shù)據(jù)架構(gòu)進行高級數(shù)據(jù)訪問和分析。經(jīng)過與NYSE科技公司協(xié)調(diào),Pivotal已經(jīng)將這個先進的基礎(chǔ)軟件納入一個稱為Pivotal Data Dispatch的商業(yè)產(chǎn)品,以滿足Pivotal企業(yè)客戶群日益增長的數(shù)據(jù)需求。
有媒體對此評論道:“Pivotal DD為大數(shù)據(jù)和分析掃清了障礙,通過自助式數(shù)據(jù)發(fā)現(xiàn)和訪問提高速度。通過統(tǒng)一訪問控制、增強策略和審計功能提高安全性與合規(guī)性。通過減少IT參與穩(wěn)定成本,管控租用沙箱導(dǎo)致的數(shù)據(jù)增長,提高效率。”
查閱資料發(fā)現(xiàn),Pivotal DD還提供如下功能:
統(tǒng)一數(shù)據(jù)平臺:這是一個不同數(shù)據(jù)平臺的目錄,使IT部門能夠注冊數(shù)據(jù)平臺、定義業(yè)務(wù)元數(shù)據(jù)、建立安全和訪問規(guī)則并執(zhí)行各種政策。
面向Hadoop及其他系統(tǒng)的數(shù)據(jù)管理:快速訪問企業(yè)數(shù)據(jù)池——一種電子文件圖書館和數(shù)據(jù)庫系統(tǒng)。系統(tǒng)還可以包括基于Hadoop的平臺、數(shù)據(jù)網(wǎng)格和高速緩存服務(wù)、MPP專用設(shè)備、信息隊列以及內(nèi)部或外部云。
自配置:建立按需分析沙箱和規(guī)定時間的數(shù)據(jù)租用,所規(guī)定時間由數(shù)據(jù)工作者和數(shù)據(jù)經(jīng)理設(shè)置。
安全與訪問控制:單一元數(shù)據(jù)庫用于實現(xiàn)統(tǒng)一訪問、安全性、譜系追蹤以及IT管理員的可審計性。
再者,從另一個方面分析,“目前用Hadoop的企業(yè)為數(shù)不多。但我們可以感受到,有些企業(yè)已經(jīng)先行。”Pivotal全球業(yè)務(wù)發(fā)展與策略副總裁David Menninger早已認識到這一點,實際上,在國內(nèi)幾次有關(guān)Hadoop的大會現(xiàn)場與會者爆滿就可以看出國內(nèi)企業(yè)用戶對于Hadoop技術(shù)的關(guān)心與專注度。
相關(guān)數(shù)據(jù)顯示,Pivotal現(xiàn)有1200人,700人都是工程師,在面臨下一代云計算和大數(shù)據(jù)應(yīng)用相結(jié)合的道路上,Pivotal 已經(jīng)在步步搶先,阿明相信它未來將會做得更好。
也如David Menninger 所言:“Pivotal 代表著轉(zhuǎn)變,新時代需要新平臺。” 因此,我們不得不看好未來的Pivotal。(阿明)
公司簡介 | 媒體優(yōu)勢 | 廣告服務(wù) | 客戶寄語 | DOIT歷程 | 誠聘英才 | 聯(lián)系我們 | 會員注冊 | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.