從數(shù)據(jù)到大數(shù)據(jù)
王偉 吳以四 | 發(fā)表于:12年06月11日 10:34 [來(lái)稿] DOIT.com.cn
人類(lèi)自從誕生以來(lái)就在源源不斷地創(chuàng)造著數(shù)據(jù),商業(yè)文明的發(fā)展自始至終都離不開(kāi)對(duì)于數(shù)據(jù)寶藏的挖掘,在商業(yè)世界中,數(shù)據(jù)一直都不是什么新鮮的東西,但是當(dāng)海量的數(shù)據(jù)積累所造就的“大數(shù)據(jù)”時(shí)代到來(lái),經(jīng)濟(jì)的新的增量已經(jīng)逐漸露出了面紗。
盡管數(shù)據(jù)挖掘的工作人類(lèi)已經(jīng)做了幾十年,但是“大數(shù)據(jù)”與我們通常所說(shuō)的“數(shù)據(jù)”還是有顯著的不同。
1997年,一臺(tái)名叫“深藍(lán)”的計(jì)算機(jī)擊敗了當(dāng)時(shí)的國(guó)際象棋冠軍Garry Kasparov。2011年,另一臺(tái)計(jì)算機(jī)Watson在廣受歡迎的美國(guó)電視智力競(jìng)賽節(jié)目《Jeopardy!》再次戰(zhàn)勝前幾屆的冠軍。
這兩件事很好地詮釋了數(shù)據(jù)與大數(shù)據(jù)這兩個(gè)不同的商業(yè)時(shí)代。誕生于數(shù)據(jù)時(shí)代的深藍(lán),通過(guò)將象棋的游戲規(guī)則轉(zhuǎn)化為以0和1形式存在的算法,借助全新并行處理技術(shù),計(jì)算可能的走棋結(jié)果,如今,幾乎任何一臺(tái)計(jì)算機(jī)都能夠通過(guò)掃描數(shù)據(jù)庫(kù)而將結(jié)構(gòu)化查詢(xún)與答案匹配起來(lái)。而在大數(shù)據(jù)相關(guān)技術(shù)的幫助下,Watson則能夠回答那些以人類(lèi)說(shuō)話(huà)方式提出的不可預(yù)測(cè)的問(wèn)題,Watson 能夠“讀取”大量人類(lèi)知識(shí)載體,包括百科全書(shū)、報(bào)告、報(bào)紙、書(shū)籍等。它以分析形式評(píng)估證據(jù),假設(shè)應(yīng)答結(jié)果,并計(jì)算每種可能性的可信度。它在數(shù)秒內(nèi)提供一個(gè)最有可能正確的答案。另外,它在做這些工作時(shí),速度和準(zhǔn)確性都超過(guò)世界一流的人類(lèi)對(duì)手。
大數(shù)據(jù)的迅速增長(zhǎng)及相關(guān)技術(shù)的發(fā)展正在帶來(lái)全新的商業(yè)機(jī)遇。據(jù)《麻省理工學(xué)院斯隆管理評(píng)論》和IBM商業(yè)價(jià)值研究院聯(lián)合舉行的2011年新智能企業(yè)全球高管調(diào)查和研究項(xiàng)目指出,絕大多數(shù)企業(yè)都已抓住了這些機(jī)遇。2011年,58%的企業(yè)已經(jīng)將分析技術(shù)用于在市場(chǎng)或行業(yè)內(nèi)創(chuàng)造競(jìng)爭(zhēng)優(yōu)勢(shì),而2010年這一比例僅為37%。值得注意的是,采用分析技術(shù)的企業(yè)持續(xù)超越同行的可能性要高兩倍。
對(duì)于任何企業(yè)來(lái)說(shuō),數(shù)據(jù)都是其商業(yè)皇冠上最為耀眼奪目的那顆寶石。伴隨著傳統(tǒng)的商業(yè)智能系統(tǒng)向縱深應(yīng)用的拓展,商業(yè)決策已經(jīng)越來(lái)越依賴(lài)于數(shù)據(jù)。然而,傳統(tǒng)的商業(yè)智能系統(tǒng)中用以分析的數(shù)據(jù),大都是企業(yè)自身信息系統(tǒng)中產(chǎn)生的運(yùn)營(yíng)數(shù)據(jù),這些數(shù)據(jù)大都是標(biāo)準(zhǔn)化、結(jié)構(gòu)化的。事實(shí)上,這些數(shù)據(jù)只占到了企業(yè)所能獲取的數(shù)據(jù)中很小的一部分——不到15%。
通常情況下,企業(yè)的數(shù)據(jù)可以分為3種類(lèi)型:結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)。其中,85%的數(shù)據(jù)屬于廣泛存在于社交網(wǎng)絡(luò)、物聯(lián)網(wǎng)、電子商務(wù)等之中的非結(jié)構(gòu)化數(shù)據(jù)。這些非結(jié)構(gòu)化數(shù)據(jù)的產(chǎn)生往往伴隨著社交網(wǎng)絡(luò)、移動(dòng)計(jì)算和傳感器等新的渠道和技術(shù)的不斷涌現(xiàn)和應(yīng)用。企業(yè)用以分析的數(shù)據(jù)越全面,分析的結(jié)果就越接近于真實(shí)。大數(shù)據(jù)分析意味著企業(yè)能夠從這些新的數(shù)據(jù)中獲取新的洞察力,并將其與已知業(yè)務(wù)的各個(gè)細(xì)節(jié)相融合。
在沃爾沃集團(tuán),通過(guò)在卡車(chē)產(chǎn)品中安裝傳感器和嵌入式CPU,從剎車(chē)到中央門(mén)鎖系統(tǒng)等形形色色的車(chē)輛使用信息,正源源不斷地傳輸?shù)轿譅栁旨瘓F(tuán)總部。“對(duì)這些數(shù)據(jù)進(jìn)行分析,不僅可以幫助我們制造更好的汽車(chē),還可以幫助客戶(hù)們獲取更好體驗(yàn)。”沃爾沃集團(tuán)CIO Rich Strader說(shuō)。
現(xiàn)在,這些數(shù)據(jù)正在被用來(lái)優(yōu)化生產(chǎn)流程,以提升客戶(hù)體驗(yàn)和提升安全性。將來(lái)自不同客戶(hù)的使用數(shù)據(jù)進(jìn)行分析,可以讓產(chǎn)品部門(mén)提早發(fā)現(xiàn)產(chǎn)品潛在的問(wèn)題,并在這些問(wèn)題發(fā)生之前提前向客戶(hù)預(yù)警。“產(chǎn)品設(shè)計(jì)方面的缺陷,此前可能需要有50萬(wàn)臺(tái)銷(xiāo)量的時(shí)候才能暴露出來(lái),而現(xiàn)在只需要1000臺(tái),我們就能發(fā)現(xiàn)潛在的缺陷。” Rich Strader說(shuō)。
在美國(guó)最大的醫(yī)藥貿(mào)易商McKesson公司,對(duì)大數(shù)據(jù)的應(yīng)用也已經(jīng)遠(yuǎn)遠(yuǎn)領(lǐng)先于大多數(shù)企業(yè),將先進(jìn)的分析能力融合到每天處理200萬(wàn)個(gè)訂單的供應(yīng)鏈業(yè)務(wù)中,并且監(jiān)督超過(guò)80億美元的存貨。
對(duì)于在途存貨的管理,McKesson開(kāi)發(fā)了一種供應(yīng)鏈模型,它根據(jù)產(chǎn)品線(xiàn)、運(yùn)輸費(fèi)用甚至碳排放量而提供了極為準(zhǔn)確的維護(hù)成本視圖。據(jù)公司流程改造副總裁Robert Gooby說(shuō),這些詳細(xì)信息使公司能夠更加真實(shí)地了解任意時(shí)間點(diǎn)的運(yùn)營(yíng)情況。
Gooby解釋說(shuō):“但是,大多數(shù)模型旨在簡(jiǎn)化物理世界,而這個(gè)模型極為復(fù)雜,并且包含我們的現(xiàn)實(shí)世界的全部數(shù)據(jù)。它允許我們量化業(yè)務(wù)運(yùn)作的根本性變化所產(chǎn)生的影響的細(xì)節(jié)。這個(gè)模型并不是一種簡(jiǎn)化版。”
McKesson利用先進(jìn)分析技術(shù)的另一個(gè)領(lǐng)域是對(duì)配送中心內(nèi)的物理存貨配置進(jìn)行模擬和自動(dòng)化處理。評(píng)估政策和供應(yīng)鏈變化的能力幫助公司增強(qiáng)了對(duì)客戶(hù)的響應(yīng)能力,同時(shí)減少了流動(dòng)資金?傮w來(lái)講,McKesson的供應(yīng)鏈轉(zhuǎn)型使公司節(jié)省了超過(guò)1億美元的流動(dòng)資金。
同樣對(duì)大數(shù)據(jù)情有獨(dú)鐘的,還有中國(guó)移動(dòng)集團(tuán)山西有限公司,通過(guò)大數(shù)據(jù)分析,對(duì)企業(yè)運(yùn)營(yíng)的全業(yè)務(wù)進(jìn)行針對(duì)性的監(jiān)控、預(yù)警、跟蹤。系統(tǒng)在第一時(shí)間自動(dòng)捕捉市場(chǎng)變化,再以最快捷的方式推送給指定負(fù)責(zé)人,使他在最短時(shí)間內(nèi)獲知市場(chǎng)行情。
“全面獲取業(yè)務(wù)信息非常重要,有時(shí)候甚至能顛覆常規(guī)分析思路下做出的結(jié)論。” 中國(guó)移動(dòng)集團(tuán)山西有限公司業(yè)務(wù)支撐系統(tǒng)部經(jīng)理王峰說(shuō)。比如,一個(gè)客戶(hù)使用最新款的諾基亞手機(jī),每月準(zhǔn)時(shí)繳費(fèi)、平均一年致電客服3次,使用WEP和彩信業(yè)務(wù)。如果按照傳統(tǒng)的數(shù)據(jù)分析,可能這是一位客戶(hù)滿(mǎn)意度非常高、流失概率非常低的客戶(hù)。事實(shí)上,當(dāng)搜集了包括微博、社交網(wǎng)絡(luò)等新型來(lái)源的客戶(hù)數(shù)據(jù)之后,這位客戶(hù)的真實(shí)情況可能是這樣的:客戶(hù)在國(guó)外購(gòu)買(mǎi)的這款手機(jī),手機(jī)中的部分功能在國(guó)內(nèi)無(wú)法使用,在某個(gè)固定地點(diǎn)手機(jī)經(jīng)常斷線(xiàn),彩信無(wú)法使用——他的使用體驗(yàn)極差,正在面臨流失風(fēng)險(xiǎn)。
“我們正在打破傳統(tǒng)數(shù)據(jù)源的邊界,更加注重社交媒體等新型數(shù)據(jù)來(lái)源。通過(guò)各種渠道獲取盡可能多的客戶(hù)反饋信息,并從這些數(shù)據(jù)中挖掘更多的價(jià)值。”王峰說(shuō)。
社交網(wǎng)絡(luò)、移動(dòng)互聯(lián)網(wǎng)、企業(yè)信息化在最近這幾年中都得到了迅猛的發(fā)展,不斷產(chǎn)生的海量數(shù)據(jù)將越來(lái)越影響企業(yè)從戰(zhàn)術(shù)到戰(zhàn)略制定的各個(gè)方面,這是一個(gè)巨大的挑戰(zhàn),當(dāng)然更是機(jī)遇,因?yàn)樵诖髷?shù)據(jù)的背后,將是IT廠商跨越到商業(yè)智能的絕佳機(jī)會(huì)。
IBM當(dāng)年之所以完成從PC廠商開(kāi)始向商業(yè)智能服務(wù)商的成功轉(zhuǎn)型,一個(gè)重要的原因就是其較早預(yù)見(jiàn)到了大數(shù)據(jù)的商業(yè)機(jī)遇并果斷布局。縱觀IBM近5年10億美元以上級(jí)別的大手筆收購(gòu)多與如何有效處理大數(shù)據(jù)有關(guān)。2007年,IBM花費(fèi)20億美元收購(gòu)了商務(wù)智能軟件供應(yīng)商Congnos;2009年7月,IBM斥資12億美元收購(gòu)SPSS軟件,這是一家集數(shù)據(jù)整理、分析功能于一身的統(tǒng)計(jì)分析軟件;2010年9月,IBM以17億美元的代價(jià)將數(shù)據(jù)庫(kù)分析供應(yīng)商N(yùn)etezza收之麾下——自2005年以來(lái),IBM投資160億美元進(jìn)行了30次與大數(shù)據(jù)有關(guān)的收購(gòu)。這一系列布局,為IBM業(yè)績(jī)帶來(lái)了穩(wěn)定高速的增長(zhǎng)。2012年,IBM股價(jià)突破200美元大關(guān),累計(jì)漲幅超過(guò)9%,3年之內(nèi)股價(jià)翻了3倍。
同樣在搶占大數(shù)據(jù)蛋糕份額時(shí)占據(jù)先機(jī)的還有甲骨文。面對(duì)越來(lái)越多的海量數(shù)據(jù)所帶來(lái)的商業(yè)潛力,甲骨文的策略是在2011年的OpenWorld大會(huì)上推出了Oracle大數(shù)據(jù)機(jī)和Exalytics商務(wù)智能服務(wù)器,構(gòu)建自己的大數(shù)據(jù)平臺(tái)解決方案。除此之外,早在2008年,甲骨文就花費(fèi)33億美元收購(gòu)商業(yè)智能解決方案提供商海波龍(Hyperion),2009年以74億美元巨資鯨吞另一家IT巨頭SUN公司。
而在大數(shù)據(jù)實(shí)時(shí)分析的領(lǐng)域中,SAP也不甘人后。2011年SAP推出了HANA平臺(tái)以應(yīng)對(duì)大數(shù)據(jù)實(shí)時(shí)分析的挑戰(zhàn)。和IBM、甲骨文這些對(duì)手一樣,SAP也一直沒(méi)有停止通過(guò)大手筆的收購(gòu)在大數(shù)據(jù)領(lǐng)域進(jìn)行戰(zhàn)略布局。2007年,SAP花費(fèi)68億美元收購(gòu)全球商業(yè)智能軟件霸主Business Object,2010年5月,SAP以58億美元的代價(jià)并購(gòu)數(shù)據(jù)庫(kù)廠商Sybase。圍繞著大數(shù)據(jù)的這些大手筆的戰(zhàn)略布局也讓SAP收到了回報(bào),2011年,SAP全年利潤(rùn)翻番,達(dá)到34億歐元,造就了該公司40年歷史上最好的業(yè)績(jī)。
此外,EMC、Informatica、Taredata等公司,也都是大數(shù)據(jù)領(lǐng)域不可忽略的勢(shì)力。
公司簡(jiǎn)介 | 媒體優(yōu)勢(shì) | 廣告服務(wù) | 客戶(hù)寄語(yǔ) | DOIT歷程 | 誠(chéng)聘英才 | 聯(lián)系我們 | 會(huì)員注冊(cè) | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.