什么是大數(shù)據(jù)?
佚名 發(fā)表于:12年09月07日 12:28 [轉(zhuǎn)載] 硅谷動(dòng)力
海量數(shù)據(jù)到大數(shù)據(jù)的發(fā)展過(guò)程是一個(gè)從量變到質(zhì)變的過(guò)程。數(shù)據(jù)發(fā)展已有多年,每年都以翻倍的速度在增長(zhǎng)。過(guò)去增長(zhǎng)以往的技術(shù)能夠?qū)λ容^好的管理,但一旦到達(dá)一個(gè)臨界點(diǎn)以后就產(chǎn)生了一個(gè)質(zhì)變,過(guò)去的技術(shù)已經(jīng)符合不了當(dāng)前的發(fā)展趨勢(shì),需要新的技術(shù)來(lái)滿足新的數(shù)量級(jí)的需求。于是大數(shù)據(jù)的概念應(yīng)運(yùn)而生。
在Forrester分析師布賴恩·霍普金斯(Brian Hopkins)和鮑里斯·埃韋爾松(Boris Evelson)撰寫(xiě)的《首席信息官,請(qǐng)用大數(shù)據(jù)擴(kuò)展數(shù)字視野》報(bào)告中,他們提出大數(shù)據(jù)的4項(xiàng)典型特征——海量(Volume)、多樣性(Variety)、高速(Velocity)和易變性(Variability)。
海量
企業(yè)面臨著數(shù)據(jù)量的大規(guī)模增長(zhǎng)。例如,IDC最近的報(bào)告預(yù)測(cè)稱,到2020年,全球數(shù)據(jù)量將擴(kuò)大50倍。目前,大數(shù)據(jù)的規(guī)模尚是一個(gè)不斷變化的指標(biāo),單一數(shù)據(jù)集的規(guī)模范圍從幾十TB到數(shù)PB不等。簡(jiǎn)而言之,存儲(chǔ)1PB數(shù)據(jù)將需要兩萬(wàn)臺(tái)配備50GB硬盤的個(gè)人電腦。
此外,各種意想不到的來(lái)源都能產(chǎn)生數(shù)據(jù)。例如,從巴塞羅那至沙特首府利雅得的單程航行中,一架商用噴氣飛機(jī)上收集的傳感器數(shù)據(jù)量將超過(guò)1PB。當(dāng)用一次飛行的數(shù)據(jù)量乘以每天所有飛行的航班數(shù),數(shù)據(jù)總量將非常驚人。
多樣性
一個(gè)普遍觀點(diǎn)認(rèn)為,人們使用互聯(lián)網(wǎng)搜索是形成數(shù)據(jù)多樣性的主要原因,這一看法部分正確。然而,數(shù)據(jù)多樣性的增加主要是由于新型多結(jié)構(gòu)數(shù)據(jù),以及包括網(wǎng)絡(luò)日志、社交媒體、互聯(lián)網(wǎng)搜索、手機(jī)通話記錄及傳感器網(wǎng)絡(luò)等數(shù)據(jù)類型造成。其中,部分傳感器安裝在火車、汽車和飛機(jī)上,每個(gè)傳感器都增加了數(shù)據(jù)的多樣性。
高速
高速描述的是數(shù)據(jù)被創(chuàng)建和移動(dòng)的速度。在高速網(wǎng)絡(luò)時(shí)代,通過(guò)基于實(shí)現(xiàn)軟件性能優(yōu)化的高速電腦處理器和服務(wù)器,創(chuàng)建實(shí)時(shí)數(shù)據(jù)流已成為流行趨勢(shì)。企業(yè)不僅需要了解如何快速創(chuàng)建數(shù)據(jù),還必須知道如何快速處理、分析并返回給用戶,以滿足他們的實(shí)時(shí)需求。
根據(jù)IMS Research研究機(jī)構(gòu)關(guān)于數(shù)據(jù)創(chuàng)建速度的調(diào)查,通過(guò)跟蹤可聯(lián)網(wǎng)設(shè)備的激活量,發(fā)現(xiàn)聯(lián)網(wǎng)設(shè)備增長(zhǎng)的第二波浪潮正在加速到來(lái)。本輪增長(zhǎng)后,將涌現(xiàn)更多新型可聯(lián)網(wǎng)設(shè)備增長(zhǎng)的浪潮。據(jù)預(yù)測(cè),到2020年全球?qū)碛?20億部互聯(lián)網(wǎng)連接設(shè)備。
易變性
大數(shù)據(jù)具有多層結(jié)構(gòu),這意味著大數(shù)據(jù)會(huì)呈現(xiàn)出多變的形式和類型。相較傳統(tǒng)的業(yè)務(wù)數(shù)據(jù),大數(shù)據(jù)存在不規(guī)則和模糊不清的特性,造成很難甚至無(wú)法使用傳統(tǒng)的應(yīng)用軟件進(jìn)行分析。傳統(tǒng)業(yè)務(wù)數(shù)據(jù)隨時(shí)間演變已擁有標(biāo)準(zhǔn)的格式,能夠被標(biāo)準(zhǔn)的商務(wù)智能軟件識(shí)別。目前,企業(yè)面臨的挑戰(zhàn)是處理并從各種形式呈現(xiàn)的復(fù)雜數(shù)據(jù)中挖掘價(jià)值。
公司簡(jiǎn)介 | 媒體優(yōu)勢(shì) | 廣告服務(wù) | 客戶寄語(yǔ) | DOIT歷程 | 誠(chéng)聘英才 | 聯(lián)系我們 | 會(huì)員注冊(cè) | 訂閱中心
Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.