您現(xiàn)在的位置:首頁 >關于我們 >行業(yè)新聞 >主存儲數(shù)據(jù):應對數(shù)據(jù)爆炸的第一絕招!

主存儲數(shù)據(jù):應對數(shù)據(jù)爆炸的第一絕招!

時間:2010年12月7日
    主存儲數(shù)據(jù)縮減方法,如重復數(shù)據(jù)刪除和壓縮,在2010年中期,當戴爾和IBM公司在數(shù)據(jù)縮減領域收購很多公司的時候,得到了業(yè)內的鼓勵和提倡。但這兩家公司在這個領域并不是唯一的開發(fā)者,還有很多主要的存儲廠商也正在主存儲領域方面開發(fā)新的產(chǎn)品,這些產(chǎn)品將對未來有更大的影響。

  “一年前如果你問我,我會說主存儲優(yōu)化的前景還不明確,F(xiàn)在,情況有了很大的不同。我們周圍的重復數(shù)據(jù)刪除,內容優(yōu)化和壓縮技術都有了明顯的不同,”馬薩諸塞州的Taneja Group高級分析師Jeff Boles說,“主存儲優(yōu)化在文件空間領域已成為了一個復選框(checkbox)項目。當它走到了block存儲的時候,基本就達到了我們的預期! (服務器托管)

重復數(shù)據(jù)刪除,蔓延到主存儲

  雖然主存儲數(shù)據(jù)縮減方法變得很有趣,但它仍然是依靠早期的重復數(shù)據(jù)刪除和數(shù)據(jù)壓縮技術,而且也沒說多長時間可以完全解決。

  NetApp公司2007年在其FAS和NearStore中加入的重復數(shù)據(jù)刪除技術, 如今已經(jīng)是備份領域中的一種成熟技術。 NetApp推出的是基于容量的,后處理重復數(shù)據(jù)刪除(post-process deduplication),能夠有效的消除在VMware虛擬環(huán)境的虛擬機操作系統(tǒng)中的冗余數(shù)據(jù)。 NetApp公司還計劃加入壓縮,并為重復數(shù)據(jù)刪除增加16TB的容量限制。

  它的競爭對手EMC公司兩年前在主存儲上使用文件級重復數(shù)據(jù)刪除和壓縮,是基于一個文件系統(tǒng)的基礎上,在它的EMC Celerra NS系列系統(tǒng)上作為一種操作系統(tǒng)的免費特性。八月份的時候,EMC公司在它的Clariion CX4和Celerra NS線上把數(shù)據(jù)縮減擴展到基于block的數(shù)據(jù)上,同時引入了LUN壓縮。

  除了NetApp和EMC,廠商在主存儲數(shù)據(jù)縮減領域的探索大多都是剛開始,直到七月,戴爾購買了Ocarina Networks公司。Ocarina公司的主存儲數(shù)據(jù)縮減設備結合了重復數(shù)據(jù)刪除和復雜的內容識別壓縮算法,一直應用在嵌入式重復數(shù)據(jù)刪除產(chǎn)品內,并計劃通過OEM來銷售給存儲供應商。

  在Dell-Ocarina發(fā)表聲明的十天后,IBM也宣布了購買Storwize公司的計劃,Storwize公司也出售實時數(shù)據(jù)壓縮設備,并且也主要通過OEM形式交易。

  在數(shù)據(jù)縮減領域的其他廠商還包括Compellent的存儲技術公司(該公司計劃明年增加重復數(shù)據(jù)刪除),GreenBytes公司, Nexenta系統(tǒng)公司 和甲骨文(以Sun的ZFS文件系統(tǒng)為基礎的重復數(shù)據(jù)刪除)。

  位于康涅狄格州斯坦福的Gartner公司研究副總裁David Russell表示,重復數(shù)據(jù)刪除大約需要五年時間才趕上備份空間,但預計主存儲重復數(shù)據(jù)刪除和壓縮的時間會比較短。 無論是重復數(shù)據(jù)刪除和/或數(shù)據(jù)壓縮在任何情況下都會很有意義。

  “雖然公平的說,這是一個不斷發(fā)展的,新生的市場,但針對主存儲的數(shù)據(jù)肯定是越來越少的”Russell說。

  戴爾和IBM公司在主存儲數(shù)據(jù)縮減領域的探索可以在未來幾年看到一個深入的路線圖。但技術如何有效的幫助IT部門解決爆炸性的數(shù)據(jù)增長仍然是一個懸而未決的問題。

  然而,The INI Group LLC的創(chuàng)始人和集團有限責任公司的高級分析師Tony Asaro預測, 主存儲重復數(shù)據(jù)刪除是“在未來幾年必然發(fā)展的”,并且“客戶已經(jīng)開始要求它,”的一項技術,不過他同時也指出,目前客戶在做重要存儲決定時,主存儲重復數(shù)據(jù)刪除還不是優(yōu)先考慮的項目。

  “如果性能對你來說是非常重要的,你很可能會想把它作為一個后處理程序(post-process);如果實時管理能力對你是最重要的事,那么你很可能會希望它是聯(lián)機的,” 他補充說:“摩爾定律使得近年來服務器CPU性能大幅提升,這確實使重復數(shù)據(jù)刪除更可行。因為[重復數(shù)據(jù)刪除]是CPU密集型的計算,特別是聯(lián)機應用時。因此,你需要更快的處理器,讓他們的速度越來越快!

標準化是白日夢嗎?

  戴爾和惠普最終設想的這種端到端的能力,在系統(tǒng)之間傳遞或刪除重復數(shù)據(jù),壓縮,將被限制在他們的專利環(huán)境,除非有一個互操作性標準。

  不同廠商的重復數(shù)據(jù)刪除和壓縮技術像雪花一樣,沒有兩個是一模一樣的。 一些操作內嵌或實時,其他是后處理(post-process.)。 一些運行在固定大小的數(shù)據(jù)塊內,其他運行在可以快換大小的塊內,有些比其他獲得更多的顆粒。 一些使用復雜的哈希算法來找出相同的數(shù)據(jù),有些則用簡單的算法。 有些讓用戶定義的重復數(shù)據(jù)刪除的范圍;有些把重復數(shù)據(jù)刪除限制在一個特定的存儲卷或文件系統(tǒng)。

  “如果我是一個用戶,我會問,'既然他們做的都是同樣的事,為什么我必須處理無窮的重復數(shù)據(jù)刪除和壓縮算法?” NetApp存儲效率解決方案一個高級營銷經(jīng)理Larry Freeman說, “問題是,現(xiàn)在,你已經(jīng)有了一個非常有競爭力的環(huán)境,沒有人愿意分享,因為這樣他們將放棄他們的專利和知識產(chǎn)權!  (服務器托管)

  Freeman表示,存儲網(wǎng)絡工業(yè)協(xié)會(SNIA)會議上的一個話題是重復數(shù)據(jù)刪除的標準化。但“當我們意識到在這點上不會發(fā)生時,我們很快就停止討論了。 ”

  “沒有人會坐下來討論,因為沒有人愿意把他們的重復數(shù)據(jù)刪除和別人的做比較,”Freeman繼續(xù)說到, “沒有人愿意說誰的重復數(shù)據(jù)刪除是最好的,誰的是不好的。”

Copyright© 2004-2020 河南海騰電子技術有限公司 版權所有   經(jīng)營性ICP/ISP證 備案號:B1-20180452   豫公網(wǎng)安備 41019702002018號    電子營業(yè)執(zhí)照