“一年前如果你問(wèn)我,我會(huì)說(shuō)主存儲(chǔ)優(yōu)化的前景還不明確�，F(xiàn)在,情況有了很大的不同。我們周?chē)�的重�?fù)數(shù)據(jù)刪除,內(nèi)容優(yōu)化和壓縮技術(shù)都有了明顯的不同,”馬薩諸塞州的Taneja Group高級(jí)分析師Jeff Boles說(shuō),“主存儲(chǔ)優(yōu)化在文件空間領(lǐng)域已成為了一個(gè)復(fù)選框(checkbox)項(xiàng)目。當(dāng)它走到了block存儲(chǔ)的時(shí)候,基本就達(dá)到了我們的預(yù)期�！� (服務(wù)器托管)

重復(fù)數(shù)據(jù)刪除,蔓延到主存儲(chǔ)

　　雖然主存儲(chǔ)數(shù)據(jù)縮減方法變得很有趣,但它仍然是依靠早期的重復(fù)數(shù)據(jù)刪除和數(shù)據(jù)壓縮技術(shù),而且也沒(méi)說(shuō)多長(zhǎng)時(shí)間可以完全解決。

　　NetApp公司2007年在其FAS和NearStore中加入的重復(fù)數(shù)據(jù)刪除技術(shù), 如今已經(jīng)是備份領(lǐng)域中的一種成熟技術(shù)。 NetApp推出的是基于容量的,后處理重復(fù)數(shù)據(jù)刪除(post-process deduplication),能夠有效的消除在VMware虛擬環(huán)境的虛擬機(jī)操作系統(tǒng)中的冗余數(shù)據(jù)。 NetApp公司還計(jì)劃加入壓縮,并為重復(fù)數(shù)據(jù)刪除增加16TB的容量限制。

　　它的競(jìng)爭(zhēng)對(duì)手EMC公司兩年前在主存儲(chǔ)上使用文件級(jí)重復(fù)數(shù)據(jù)刪除和壓縮,是基于一個(gè)文件系統(tǒng)的基礎(chǔ)上,在它的EMC Celerra NS系列系統(tǒng)上作為一種操作系統(tǒng)的免費(fèi)特性。八月份的時(shí)候,EMC公司在它的Clariion CX4和Celerra NS線上把數(shù)據(jù)縮減擴(kuò)展到基于block的數(shù)據(jù)上,同時(shí)引入了LUN壓縮。

　　除了NetApp和EMC,廠商在主存儲(chǔ)數(shù)據(jù)縮減領(lǐng)域的探索大多都是剛開(kāi)始,直到七月,戴爾購(gòu)買(mǎi)了Ocarina Networks公司。Ocarina公司的主存儲(chǔ)數(shù)據(jù)縮減設(shè)備結(jié)合了重復(fù)數(shù)據(jù)刪除和復(fù)雜的內(nèi)容識(shí)別壓縮算法,一直應(yīng)用在嵌入式重復(fù)數(shù)據(jù)刪除產(chǎn)品內(nèi),并計(jì)劃通過(guò)OEM來(lái)銷(xiāo)售給存儲(chǔ)供應(yīng)商。

　　在Dell-Ocarina發(fā)表聲明的十天后,IBM也宣布了購(gòu)買(mǎi)Storwize公司的計(jì)劃,Storwize公司也出售實(shí)時(shí)數(shù)據(jù)壓縮設(shè)備,并且也主要通過(guò)OEM形式交易。

　　在數(shù)據(jù)縮減領(lǐng)域的其他廠商還包括Compellent的存儲(chǔ)技術(shù)公司(該公司計(jì)劃明年增加重復(fù)數(shù)據(jù)刪除),GreenBytes公司, Nexenta系統(tǒng)公司 和甲骨文(以Sun的ZFS文件系統(tǒng)為基礎(chǔ)的重復(fù)數(shù)據(jù)刪除)。

　　位于康涅狄格州斯坦福的Gartner公司研究副總裁David Russell表示,重復(fù)數(shù)據(jù)刪除大約需要五年時(shí)間才趕上備份空間,但預(yù)計(jì)主存儲(chǔ)重復(fù)數(shù)據(jù)刪除和壓縮的時(shí)間會(huì)比較短。 無(wú)論是重復(fù)數(shù)據(jù)刪除和/或數(shù)據(jù)壓縮在任何情況下都會(huì)很有意義。

　　“雖然公平的說(shuō),這是一個(gè)不斷發(fā)展的,新生的市場(chǎng),但針對(duì)主存儲(chǔ)的數(shù)據(jù)肯定是越來(lái)越少的”Russell說(shuō)。

　　戴爾和IBM公司在主存儲(chǔ)數(shù)據(jù)縮減領(lǐng)域的探索可以在未來(lái)幾年看到一個(gè)深入的路線圖。但技術(shù)如何有效的幫助IT部門(mén)解決爆炸性的數(shù)據(jù)增長(zhǎng)仍然是一個(gè)懸而未決的問(wèn)題。

　　然而,The INI Group LLC的創(chuàng)始人和集團(tuán)有限責(zé)任公司的高級(jí)分析師Tony Asaro預(yù)測(cè), 主存儲(chǔ)重復(fù)數(shù)據(jù)刪除是“在未來(lái)幾年必然發(fā)展的”,并且“客戶已經(jīng)開(kāi)始要求它,”的一項(xiàng)技術(shù),不過(guò)他同時(shí)也指出,目前客戶在做重要存儲(chǔ)決定時(shí),主存儲(chǔ)重復(fù)數(shù)據(jù)刪除還不是優(yōu)先考慮的項(xiàng)目。

　　“如果性能對(duì)你來(lái)說(shuō)是非常重要的,你很可能會(huì)想把它作為一個(gè)后處理程序(post-process);如果實(shí)時(shí)管理能力對(duì)你是最重要的事,那么你很可能會(huì)希望它是聯(lián)機(jī)的,” 他補(bǔ)充說(shuō):“摩爾定律使得近年來(lái)服務(wù)器CPU性能大幅提升,這確實(shí)使重復(fù)數(shù)據(jù)刪除更可行。因?yàn)閇重復(fù)數(shù)據(jù)刪除]是CPU密集型的計(jì)算,特別是聯(lián)機(jī)應(yīng)用時(shí)。因此,你需要更快的處理器,讓他們的速度越來(lái)越快�！�

標(biāo)準(zhǔn)化是白日夢(mèng)嗎?

　　戴爾和惠普最終設(shè)想的這種端到端的能力,在系統(tǒng)之間傳遞或刪除重復(fù)數(shù)據(jù),壓縮,將被限制在他們的專(zhuān)利環(huán)境,除非有一個(gè)互操作性標(biāo)準(zhǔn)。

　　不同廠商的重復(fù)數(shù)據(jù)刪除和壓縮技術(shù)像雪花一樣,沒(méi)有兩個(gè)是一模一樣的。 一些操作內(nèi)嵌或?qū)崟r(shí),其他是后處理(post-process.)。 一些運(yùn)行在固定大小的數(shù)據(jù)塊內(nèi),其他運(yùn)行在可以快換大小的塊內(nèi),有些比其他獲得更多的顆粒。 一些使用復(fù)雜的哈希算法來(lái)找出相同的數(shù)據(jù),有些則用簡(jiǎn)單的算法。 有些讓用戶定義的重復(fù)數(shù)據(jù)刪除的范圍;有些把重復(fù)數(shù)據(jù)刪除限制在一個(gè)特定的存儲(chǔ)卷或文件系統(tǒng)。

　　“如果我是一個(gè)用戶,我會(huì)問(wèn),'既然他們做的都是同樣的事,為什么我必須處理無(wú)窮的重復(fù)數(shù)據(jù)刪除和壓縮算法?” NetApp存儲(chǔ)效率解決方案一個(gè)高級(jí)營(yíng)銷(xiāo)經(jīng)理Larry Freeman說(shuō), “問(wèn)題是,現(xiàn)在,你已經(jīng)有了一個(gè)非常有競(jìng)爭(zhēng)力的環(huán)境,沒(méi)有人愿意分享,因?yàn)檫@樣他們將放棄他們的專(zhuān)利和知識(shí)產(chǎn)權(quán)�！�  (服務(wù)器托管)

　　Freeman表示,存儲(chǔ)網(wǎng)絡(luò)工業(yè)協(xié)會(huì)(SNIA)會(huì)議上的一個(gè)話題是重復(fù)數(shù)據(jù)刪除的標(biāo)準(zhǔn)化。但“當(dāng)我們意識(shí)到在這點(diǎn)上不會(huì)發(fā)生時(shí),我們很快就停止討論了。 ”

　　“沒(méi)有人會(huì)坐下來(lái)討論,因?yàn)闆](méi)有人愿意把他們的重復(fù)數(shù)據(jù)刪除和別人的做比較,”Freeman繼續(xù)說(shuō)到, “沒(méi)有人愿意說(shuō)誰(shuí)的重復(fù)數(shù)據(jù)刪除是最好的,誰(shuí)的是不好的�！�