国产精品一区二区av交换,中文字幕人成无码免费视频,永久免费av无码网站性色av,欧美一道本一区二区三区,樱桃熟了a级毛片

什么樣的存儲設備決定怎樣的未來?

vivian 發(fā)表于:13年06月17日 10:49 [編譯] DOIT.com.cn

  • 分享:
[導讀]我一直都是這個態(tài)度,而且存儲發(fā)展的趨勢也很明顯:不論你使用什么應用,使用的是云,Hadoop或文件系統(tǒng),裝備才能決定你的未來。如果你遇到存儲問題,至少會有一家供應商能為你提供解決方案。

我一直都是這個態(tài)度,而且存儲發(fā)展的趨勢也很明顯:不論你使用什么應用,使用的是云,Hadoop或文件系統(tǒng),裝備才能決定你的未來。如果你遇到存儲問題,至少會有一家供應商能為你提供解決方案。

不論是在企業(yè)內(nèi)部還是面向公共云,數(shù)據(jù)中心的加固都是目前IT行業(yè)的重要部分。所以,你應該做些什么確保以后找得到工作呢?

我的建議:設備跟上潮流。

當公司選擇把IT架構全部或部分外包出去時,是因為有人可以從中獲利。我所聽說過的IT外包利潤高達25%。問問你自己為什么其他公司或云供應商可以買下所需的硬件和軟件之余,公司內(nèi)部IT部門還可以獲利。從我以往的觀察來看,部分是因為公司內(nèi)部政治通常會降低數(shù)據(jù)中心的效率。每個部門都想按照自己的方式做事。

但是設備模式不會按照人們的主觀想法來改變,它只會按照企業(yè)的結構模式來改變。

我想通過這篇文章談談你應該了解的一些設備及其差異,好讓大家未雨綢繆。如果你的IT架構像壁爐管道,沒有對存儲,虛擬化和運算進行分區(qū),那么就需要在未來幾年迅速對此環(huán)境做出改變。另外,你可能正在找新工作,因為一些供應商們正通過外包,IT合同或轉交給云供應商的方式將你的環(huán)境變得更為新潮。

我的觀點是,你需要好好計劃,充分準備。我們先說說你需要熟悉的幾種設備。

Hadoop 設備

這類設備可分為三種:

1.標準Hadoop

2.共享型文件系統(tǒng)Hadoop

3.快速存儲Hadoop

標準Hadoop

如果是一個標準設備,你可以為Hadoop購買預加載和配置好的節(jié)點以及優(yōu)化過的硬件。

你可以從很多供應商那里購買這類軟硬件。某些情況下,你還可以只是為集群購買軟件,而在其他情況下,則是從軟硬件優(yōu)化的廠商那里購買。不論何種方式,這都是具備三方復制,帶有預配置軟硬件的標準Hadoop。

共享型文件系統(tǒng)Hadoop

共享型文件系統(tǒng)設備通常具備Lustre或GPFS文件系統(tǒng),它們可以優(yōu)化Hadoop的清洗階段(Shuffle Phase)。此法之所以奏效是因為可從全球的節(jié)點讀取數(shù)據(jù),而不是一定要跨網(wǎng)絡讀取或分布。所有的節(jié)點都依附于共享型文件系統(tǒng),可從存儲的地方直接讀取數(shù)據(jù),無需從服務器進入網(wǎng)絡,再返回服務器到存儲。

用這種方法處理某些問題,比標準的Hadoop配置方法快速。此外,還保障了RAID的可靠性和故障轉移。供應商們的可靠性案例顯示,如果是RAID,就不需要三方復制。

快速存儲設備

很多供應商都已經(jīng)具備或是正在開發(fā)用于Hadoop的SSD設備。他們的隊伍會越來越壯大。這些設備都是被優(yōu)化過的,易于管理。

哪一個最好?

當然,答案取決于數(shù)據(jù)的數(shù)量和類型,有多少數(shù)據(jù)輸入以及正在執(zhí)行幾項查詢。搞清楚這些問題有利于你的選擇。

大型文件系統(tǒng)設備

目前,有兩個不同的大型共享型文件系統(tǒng)被用于大型存儲設備--GPFS和Lustre。很多供應商們都在生產(chǎn)這些設備。Lustre是一項開源項目,而GPFS則由IBM出品。

這些文件系統(tǒng)的擴展性能遠超當前NAS供應商的產(chǎn)品。兩個文件系統(tǒng)都可以擴展到數(shù)千客戶端,傳輸速度可達每秒幾百GB。什么樣的NAS供應商在可擴展的單獨域名空間中擁有30+PB呢?

問題是,從很大程度上說,這兩個文件系統(tǒng)都是按照大型數(shù)據(jù)塊的需求和用戶的連續(xù)I/O設計的。這并不是說不能對軟硬件進行配置,使其支持更小的數(shù)據(jù)塊。我并不是說小型數(shù)據(jù)塊的性能比NAS機箱要好,但或許你想搞清楚這些問題,以顯示你的共享文件系統(tǒng)有多神奇。

1.從以下方面了解你的工作負載:

  • 同一時間有多少I/O請求?
  • 讀取速率和讀取請求的規(guī)模是多少?
  • 一次開放或創(chuàng)建的載荷有多少?
  • 需要多少存儲?

2.向供應商詢問端到端的可靠性。

  • 是否使用了ANSI T10 DIF/PI?
  • 是否使用了其他方法?
  • 是否使用校驗和或錯誤校驗代碼?
  • 供應商如何告訴你錯誤導致錯誤發(fā)生的磁盤是哪一個?

3. 詢問供應商關于RAID重建的事情。

  • RAID是否交叉存?
  • 重建需時多久?
  • 重建時,運行性能怎樣?
  • 在選擇這類設備的時候,這些問題都要好好思考。隨著擴展的進行,還需要確認是否有什么狀況會影響你完成任務。

其他設備

現(xiàn)在市場上有很多數(shù)據(jù)分析產(chǎn)品和數(shù)據(jù)庫產(chǎn)品,可能其中有些能滿足你企業(yè)的需求。這些新設備或許能以某種方式將信息關聯(lián)起來,或是使用圖譜分析尋找關系。

這類事情都是一致的:如果你無法在本地更快速更經(jīng)濟地完成,就得把任務外包到云中。

我們的工作岌岌可危

如果CIO和公司員工不遵循計劃,那總會有人遵循。那個時候,就會有人取代你。

我在日本測試一款新設計的文件系統(tǒng)時,我最好的朋友就告訴我“我們要吃壽司,不然我們就會變成壽司”。意思是你要么隨著這股潮流改變,要么等著被拍死在沙灘上。

市場上推陳出新,我們就要與時俱進。管理也應該納入這一進程,這樣才能實現(xiàn)高效。

否則,就等著把工作外包到云中或是給其他企業(yè)把,F(xiàn)在有很多新技術可以解決新問題和舊問題。我們要熟悉這些技術才能生存下去。

我想,很多我們現(xiàn)在看到的存儲技術都將成為專用設備。雖然目前90%的數(shù)據(jù)訪問都是通過POSIX系統(tǒng)接口,另外10%則通過對象接口,但是在未來十年,這種情況會發(fā)生改變。

要做好準備,還記得那時候的我們從專屬大型處理器過渡到DEC,MIPS,英特爾等廠商生產(chǎn)的微處理器嗎?這次將和上世紀90年代微處理器帶來的改變類似。

[責任編輯:鄭磊]
6月14日,三星存儲于北京舉辦了 “為冠軍而生三星840系列固態(tài)硬盤達人會”活動。
官方微信
weixin
精彩專題更多
存儲風云榜”是由DOIT傳媒主辦的年度大型活動。回顧2014年,存儲作為IT系統(tǒng)架構中最基礎的元素,已經(jīng)成為了推動信息產(chǎn)業(yè)發(fā)展的核心動力,存儲產(chǎn)業(yè)的發(fā)展邁向成熟,數(shù)據(jù)經(jīng)濟的概念順勢而為的提出。
華為OceanStor V3系列存儲系統(tǒng)是面向企業(yè)級應用的新一代統(tǒng)一存儲產(chǎn)品。在功能、性能、效率、可靠性和易用性上都達到業(yè)界領先水平,很好的滿足了大型數(shù)據(jù)庫OLTP/OLAP、文件共享、云計算等各種應用下的數(shù)據(jù)存儲需求。
聯(lián)想攜ThinkServer+System+七大行業(yè)解決方案驚艷第十六屆高交會
 

公司簡介 | 媒體優(yōu)勢 | 廣告服務 | 客戶寄語 | DOIT歷程 | 誠聘英才 | 聯(lián)系我們 | 會員注冊 | 訂閱中心

Copyright © 2013 DOIT Media, All rights Reserved. 北京楚科信息技術有限公司 版權所有.