国产精品一区二区av交换,中文字幕人成无码免费视频,永久免费av无码网站性色av,欧美一道本一区二区三区,樱桃熟了a级毛片

簡化編程語言 讓大數(shù)據(jù)可視化

wangfei 發(fā)表于:13年05月30日 00:16 [編譯] DOIT.com.cn

  • 分享:
[導(dǎo)讀]科學(xué)研究員們對大數(shù)據(jù)并不陌生。有些科學(xué)家可能要把80%到90%的時間用于梳理、校正和收集數(shù)據(jù)。 在很多情況下,他們甚至還要編寫自己的軟件來執(zhí)行那些數(shù)據(jù)項目。但是大數(shù)據(jù)的商業(yè)化已經(jīng)開始說明這項技術(shù)將逐漸成為商業(yè)環(huán)境所需的重要技術(shù)了。

科學(xué)研究員們對大數(shù)據(jù)并不陌生。有些科學(xué)家可能要把80%到90%的時間用于梳理、校正和收集數(shù)據(jù)。 在很多情況下,他們甚至還要編寫自己的軟件來執(zhí)行那些數(shù)據(jù)項目。但是大數(shù)據(jù)的商業(yè)化已經(jīng)開始說明這項技術(shù)將逐漸成為商業(yè)環(huán)境所需的重要技術(shù)了。

你或許已經(jīng)聽說過不少關(guān)于Apache的開源框架Hadoop的消息,它是一種基于Java的技術(shù),利用谷歌的MapReduce編程模型來處理大數(shù)據(jù)集。但是如果你想要處理與大數(shù)據(jù)有關(guān)的問題,那你就必須知道上個世紀(jì)八十年代末被開發(fā)出來的、可讀性極高的Python編程語言。 Python支持Java和Ruby(上個世紀(jì)九十年代研發(fā)出來的一種通用編程語言),它是全球應(yīng)用范圍最廣泛的編程語言之一。據(jù)Continuum Analytics的總裁Peter Wang稱,增加新的、能夠作為一項服務(wù)提供的數(shù)據(jù)分析工具就可以解決大數(shù)據(jù)分析中的某些難題。

Continuum Analytics的開發(fā)人員對NumPy、SciPy、PyTables和Chaco庫有著深刻地認(rèn)識,他們正在協(xié)助推動Numba和Blaze等開源項目的開發(fā)。但是他們也能盈利。 他們主要向投資銀行、對沖基金、好萊塢后期效果制作公司等客戶提供基于Python的大數(shù)據(jù)分析解決方案,美國國防高級研究項目管理局(DARPA)很快也將采用那些解決方案。

Wang表示,DARPA所面臨的大數(shù)據(jù)難題與那些存在于標(biāo)準(zhǔn)商業(yè)環(huán)境中的大數(shù)據(jù)難題并沒有太大的不同。Wang說:“區(qū)別只在于DARPA擁有更多的預(yù)算,而且他們愿意在先進(jìn)技術(shù)上花錢。 DARPA以前一直從十多家廠商那里購買分析工具,但是現(xiàn)在,大數(shù)據(jù)方面的問題并不是出在分析技術(shù)本身,而是如何高效地將數(shù)據(jù)歸攏在一起,然后才能進(jìn)行數(shù)據(jù)分析。”

Continuum Analytics為DARPA的項目提供了14位開發(fā)員。他們正在開發(fā)他們在開發(fā)可視化技術(shù)中需要使用的語言,尤其注重可擴(kuò)展性、互動性和可擴(kuò)展性,同時為非程序員最終用戶提供一種概念模型。 最后一點對于項目的成功非常重要,也是DARPA啟動支持開源Python語言的項目的原因。

Wang表示:“許多傳統(tǒng)的軟件開發(fā)語言如C++和Java都源自于計算機(jī)科學(xué),而且在以前的數(shù)十年里積累了大量的經(jīng)驗。Python是20年前開發(fā)出來的一種腳本語言,但是它最大的特點是這種語言具有很強(qiáng)的可擴(kuò)展性?茖W(xué)家們在大約12年前開始使用它來創(chuàng)建庫,之后Python又被用于高性能計算領(lǐng)域。我們開發(fā)的是下一代科學(xué)Python分析工具,而且還打算將它作為一種軟件型產(chǎn)品提供給企業(yè)用戶。”

DARPA目前有大約20個不同的團(tuán)隊在開發(fā)XDATA項目。XDATA項目的目的是為了解決現(xiàn)代企業(yè)在大數(shù)據(jù)上面臨的問題。

Wang表示:“DARPA讓分析師們使用我們的工具。他們需要進(jìn)行大規(guī)模的高級分析工作,但是最新的商業(yè)產(chǎn)品并不能滿足那個水平的分析需求,因此他們才選用了Python。”

DARPA稱,它想為用戶們提供一套開源軟件工具,以促成應(yīng)用數(shù)學(xué)、計算機(jī)科學(xué)和數(shù)據(jù)可視化社區(qū)之間的協(xié)作,而且這必須是各種最終用戶都能使用的才行。

它說:“如果一切進(jìn)展順利,它將成為一種允許人們以高效的方式對PB級數(shù)據(jù)進(jìn)行大規(guī)模分析和可視化處理的系統(tǒng)。我們將在此基礎(chǔ)上提供一種明確的觀點,它是當(dāng)前必須解決的一個非常大的難題。”

“DARPA的需求也許比這個行業(yè)一貫預(yù)想得更大一些,但是由于Python以及這種語言已經(jīng)獲得的投資,投資銀行和其他重要客戶似乎都考慮用Python來處理超大規(guī)模的數(shù)據(jù)。 對于這些人來說,這不過是一場數(shù)字游戲而已。”

[責(zé)任編輯:鄭磊]
存儲在線今天就云存儲、WD各系列硬盤、SSD、軟件定義存儲等一系列熱門話題,與西部數(shù)據(jù)全球云儲存產(chǎn)品高級總監(jiān)Patrick Wilkison進(jìn)行深入的探討。
官方微信
weixin
精彩專題更多
存儲風(fēng)云榜”是由DOIT傳媒主辦的年度大型活動;仡2014年,存儲作為IT系統(tǒng)架構(gòu)中最基礎(chǔ)的元素,已經(jīng)成為了推動信息產(chǎn)業(yè)發(fā)展的核心動力,存儲產(chǎn)業(yè)的發(fā)展邁向成熟,數(shù)據(jù)經(jīng)濟(jì)的概念順勢而為的提出。
華為OceanStor V3系列存儲系統(tǒng)是面向企業(yè)級應(yīng)用的新一代統(tǒng)一存儲產(chǎn)品。在功能、性能、效率、可靠性和易用性上都達(dá)到業(yè)界領(lǐng)先水平,很好的滿足了大型數(shù)據(jù)庫OLTP/OLAP、文件共享、云計算等各種應(yīng)用下的數(shù)據(jù)存儲需求。
聯(lián)想攜ThinkServer+System+七大行業(yè)解決方案驚艷第十六屆高交會
 

公司簡介 | 媒體優(yōu)勢 | 廣告服務(wù) | 客戶寄語 | DOIT歷程 | 誠聘英才 | 聯(lián)系我們 | 會員注冊 | 訂閱中心

Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術(shù)有限公司 版權(quán)所有.