“一年前如果你問我,我會說主存儲優(yōu)化的前景還不明確�，F(xiàn)在,情況有了很大的不同。我們周圍的重復(fù)數(shù)據(jù)刪除,內(nèi)容優(yōu)化和壓縮技術(shù)都有了明顯的不同,”馬薩諸塞州的Taneja Group高級分析師Jeff Boles說,“主存儲優(yōu)化在文件空間領(lǐng)域已成為了一個復(fù)選框(checkbox)項(xiàng)目。當(dāng)它走到了block存儲的時候,基本就達(dá)到了我們的預(yù)期�！� (服務(wù)器托管)

重復(fù)數(shù)據(jù)刪除,蔓延到主存儲

　　雖然主存儲數(shù)據(jù)縮減方法變得很有趣,但它仍然是依靠早期的重復(fù)數(shù)據(jù)刪除和數(shù)據(jù)壓縮技術(shù),而且也沒說多長時間可以完全解決。

　　NetApp公司2007年在其FAS和NearStore中加入的重復(fù)數(shù)據(jù)刪除技術(shù), 如今已經(jīng)是備份領(lǐng)域中的一種成熟技術(shù)。 NetApp推出的是基于容量的,后處理重復(fù)數(shù)據(jù)刪除(post-process deduplication),能夠有效的消除在VMware虛擬環(huán)境的虛擬機(jī)操作系統(tǒng)中的冗余數(shù)據(jù)。 NetApp公司還計(jì)劃加入壓縮,并為重復(fù)數(shù)據(jù)刪除增加16TB的容量限制。

　　它的競爭對手EMC公司兩年前在主存儲上使用文件級重復(fù)數(shù)據(jù)刪除和壓縮,是基于一個文件系統(tǒng)的基礎(chǔ)上,在它的EMC Celerra NS系列系統(tǒng)上作為一種操作系統(tǒng)的免費(fèi)特性。八月份的時候,EMC公司在它的Clariion CX4和Celerra NS線上把數(shù)據(jù)縮減擴(kuò)展到基于block的數(shù)據(jù)上,同時引入了LUN壓縮。

　　除了NetApp和EMC,廠商在主存儲數(shù)據(jù)縮減領(lǐng)域的探索大多都是剛開始,直到七月,戴爾購買了Ocarina Networks公司。Ocarina公司的主存儲數(shù)據(jù)縮減設(shè)備結(jié)合了重復(fù)數(shù)據(jù)刪除和復(fù)雜的內(nèi)容識別壓縮算法,一直應(yīng)用在嵌入式重復(fù)數(shù)據(jù)刪除產(chǎn)品內(nèi),并計(jì)劃通過OEM來銷售給存儲供應(yīng)商。

　　在Dell-Ocarina發(fā)表聲明的十天后,IBM也宣布了購買Storwize公司的計(jì)劃,Storwize公司也出售實(shí)時數(shù)據(jù)壓縮設(shè)備,并且也主要通過OEM形式交易。

　　在數(shù)據(jù)縮減領(lǐng)域的其他廠商還包括Compellent的存儲技術(shù)公司(該公司計(jì)劃明年增加重復(fù)數(shù)據(jù)刪除),GreenBytes公司, Nexenta系統(tǒng)公司 和甲骨文(以Sun的ZFS文件系統(tǒng)為基礎(chǔ)的重復(fù)數(shù)據(jù)刪除)。

　　位于康涅狄格州斯坦福的Gartner公司研究副總裁David Russell表示,重復(fù)數(shù)據(jù)刪除大約需要五年時間才趕上備份空間,但預(yù)計(jì)主存儲重復(fù)數(shù)據(jù)刪除和壓縮的時間會比較短。 無論是重復(fù)數(shù)據(jù)刪除和/或數(shù)據(jù)壓縮在任何情況下都會很有意義。

　　“雖然公平的說,這是一個不斷發(fā)展的,新生的市場,但針對主存儲的數(shù)據(jù)肯定是越來越少的”Russell說。

　　戴爾和IBM公司在主存儲數(shù)據(jù)縮減領(lǐng)域的探索可以在未來幾年看到一個深入的路線圖。但技術(shù)如何有效的幫助IT部門解決爆炸性的數(shù)據(jù)增長仍然是一個懸而未決的問題。

　　然而,The INI Group LLC的創(chuàng)始人和集團(tuán)有限責(zé)任公司的高級分析師Tony Asaro預(yù)測, 主存儲重復(fù)數(shù)據(jù)刪除是“在未來幾年必然發(fā)展的”,并且“客戶已經(jīng)開始要求它,”的一項(xiàng)技術(shù),不過他同時也指出,目前客戶在做重要存儲決定時,主存儲重復(fù)數(shù)據(jù)刪除還不是優(yōu)先考慮的項(xiàng)目。

　　“如果性能對你來說是非常重要的,你很可能會想把它作為一個后處理程序(post-process);如果實(shí)時管理能力對你是最重要的事,那么你很可能會希望它是聯(lián)機(jī)的,” 他補(bǔ)充說:“摩爾定律使得近年來服務(wù)器CPU性能大幅提升,這確實(shí)使重復(fù)數(shù)據(jù)刪除更可行。因?yàn)閇重復(fù)數(shù)據(jù)刪除]是CPU密集型的計(jì)算,特別是聯(lián)機(jī)應(yīng)用時。因此,你需要更快的處理器,讓他們的速度越來越快�！�

標(biāo)準(zhǔn)化是白日夢嗎?

　　戴爾和惠普最終設(shè)想的這種端到端的能力,在系統(tǒng)之間傳遞或刪除重復(fù)數(shù)據(jù),壓縮,將被限制在他們的專利環(huán)境,除非有一個互操作性標(biāo)準(zhǔn)。

　　不同廠商的重復(fù)數(shù)據(jù)刪除和壓縮技術(shù)像雪花一樣,沒有兩個是一模一樣的。 一些操作內(nèi)嵌或?qū)崟r,其他是后處理(post-process.)。 一些運(yùn)行在固定大小的數(shù)據(jù)塊內(nèi),其他運(yùn)行在可以快換大小的塊內(nèi),有些比其他獲得更多的顆粒。 一些使用復(fù)雜的哈希算法來找出相同的數(shù)據(jù),有些則用簡單的算法。 有些讓用戶定義的重復(fù)數(shù)據(jù)刪除的范圍;有些把重復(fù)數(shù)據(jù)刪除限制在一個特定的存儲卷或文件系統(tǒng)。

　　“如果我是一個用戶,我會問,'既然他們做的都是同樣的事,為什么我必須處理無窮的重復(fù)數(shù)據(jù)刪除和壓縮算法?” NetApp存儲效率解決方案一個高級營銷經(jīng)理Larry Freeman說, “問題是,現(xiàn)在,你已經(jīng)有了一個非常有競爭力的環(huán)境,沒有人愿意分享,因?yàn)檫@樣他們將放棄他們的專利和知識產(chǎn)權(quán)�！�  (服務(wù)器托管)

　　Freeman表示,存儲網(wǎng)絡(luò)工業(yè)協(xié)會(SNIA)會議上的一個話題是重復(fù)數(shù)據(jù)刪除的標(biāo)準(zhǔn)化。但“當(dāng)我們意識到在這點(diǎn)上不會發(fā)生時,我們很快就停止討論了。 ”

　　“沒有人會坐下來討論,因?yàn)闆]有人愿意把他們的重復(fù)數(shù)據(jù)刪除和別人的做比較,”Freeman繼續(xù)說到, “沒有人愿意說誰的重復(fù)數(shù)據(jù)刪除是最好的,誰的是不好的�！�