雖然存儲的售價一直都在不停的下降，但也遠遠趕不上公司內需要保存和備份的數據量的攀升速度。那么，是否有這樣一種解決方案，它能夠壓縮大量的已有數據(壓縮率達到1:10～1:20)，釋放大量的存儲空間，大大降低基于磁盤備份的成本?這正是重復數據刪除(data de-duplication)技術為我們所許下的承諾。

Curtis Preston是GlassHouse公司負責數據保護的副總裁，同時也是一位備份和存儲領域內的專家，對此他就說道：“每一個擁有大量數據的用戶至少都應該試一試重復數據刪除技術。”

但當談到購買具體的重復數據刪除方案時，Preston并沒給出具體建議。目前這個領域內已經有了很多競爭者，其中很多廠商的重復數據刪除方案已經正式推出。這些重復數據刪除方案各自的實現方式各有不同，因此有些方案可能對某些用戶來說是很好的選擇，但另換他人的話就不一定合適了。

下面我們就為打算選購重復數據刪除解決方案的用戶提供一些建議：

選購的基礎

重復數據刪除技術之所以對各個規模的用戶都是一個有吸引力的選擇，主要是由于這項技術確實能夠為那些至少擁有數TB備份數據的用戶節省成本。

但專家Preston也提醒那些打算實施此項技術的用戶必須要明白，“就壓縮率這個問題而言，不同用戶所得到的最終結果也會各不相同。”

“一般說來，1:10的壓縮比率是比較保險的數值，”他說道，“有很多用戶在使用1:20的壓縮率。但是沒有一個人***可以達到這樣的效果。你最終得到的實際結果很大程度上取決于你的備份數據類型和備份方式。”

這主要看你是否擁有眾多的異地站點或經常外出辦公的員工，或者是否打算在一個集中的數據中心內實施數據刪除。雖然你能夠找到可同時兼顧這兩種情況的重復數據刪除方案，但一種方案并不會對所有的用戶都適用。

“載體派”與“獨立派”之爭

正如現在光盤存儲領域發生的藍光與HD DVD之間的業內格式標準爭奪戰一樣，重復數據刪除領域內也分成兩大主要陣營。一方主張要首先擁有“載體”，Preston這樣表述道。這一方的支持者主要是那些VTL(虛擬磁帶庫)廠商，他們的重復數據刪除方案均以這些企業已有備份軟件中的一個新特性的形式出現。這一方的領軍廠商包括：Diligent、Data Domain、Sepaton、飛康(FalconStor)和昆騰(Quantum)。而爭奪戰的另一方則是以Avamar (現在已被EMC歸入旗下)、Asigra、賽門鐵克(Symantec)、Atempo和TimeSpring為代表的“獨立派”，他們主張在數據的根源上就對其中重復部分進行刪除，基本上取代對備份軟件的需要。

于是事情也就隨之變得復雜。“從表面上看，他們都在做著同樣地事情：他們都在尋找那些重復多余的數據塊，并努力將其處理掉，”Preston說道，“但他們也都在使用著各自不同的方式來實現這一切。并且這些不同解決方案所提供的壓縮結果，單獨的備份流量性能，以及最近的數據和較早數據的恢復性能均各有差異。”

Preston認為，一般而言，“載體派”成員的解決方案——那些VTL廠商們的方案，適合那些數據中心用戶。這是因為他們的方案具有更好的性能，同時降低了存儲數據所需的磁盤空間容量。并且其中的大多數方案都會很容易與你現有的架構融為一體，很少導致系統運轉的中斷。

但是為一個具有眾多異地辦公室的企業實施一套VTL方案的費用是非常高的，***的具備重復數據刪除功能的VTL方案的成本也要2萬美元(這僅是單一地點的費用，也不包含備份軟件及其他費用)。因此對于那些擁有眾多分支辦公室的公司來說，“獨立派”的方案顯然要劃算得多。這就是為什么擁有73個分支辦公室的Motor Vehicles公司的弗吉尼亞分公司會選擇Avamar的Axion方案。Avamar的產品幫助這家公司的眾多遠程站點削減了所需磁帶備份服務器和磁帶庫的數量。

當然獨立的重復數據刪除備份軟件業并非適合所有的用戶。“如果你的環境中有高達50TB的Oracle數據庫需要備份話，那么就忘了那些獨立的重復刪除備份軟件吧，”Preston說道，“對于大多數擁有大型獨立服務器(容量達到20～30TB)的環境來說，這些軟件的數據恢復性能會慢到讓人無法忍受。”

如果你是一個既需要對異地分支辦公室又要對中央數據中心進行備份的大型企業，那么很可能這兩種類型重復數據刪除方案都要采用。這在Preston看來也并非什么壞事。

“如果已經實施了NetBackup，但同時我又真的喜歡Avamar的產品(現在已經算是EMC的產品)。那我完全可以在我們數據中心內運行NetBackup，而將Avamar的產品分置于各個分支辦公室內，讓它們各自獨立運轉。這是因為遠程辦公室的問題確實棘手，為了解決這個麻煩我愿意做任何事情，”Preston說道。

磁帶向磁盤的轉移

重復數據刪除技術也同樣加快了企業由磁帶存儲向磁盤存儲遷移的步伐。由于大幅降低了備份數據所需的備份磁盤空間，磁盤存儲越來越顯現出對于一級和二級存儲的吸引力。

“向磁盤備份架構轉移的趨勢確實促進了用戶對我們技術的接受程度，”Avamar的創始人Jed Yueh(現任EMC Avamar的產品管理部副總裁)說道，“如今消費者都開始關注于磁盤存儲，以及如何強化自己的數據保護架構。我們的產品大幅度地降低了用戶需要備份的數據量，這就使得在備份和恢復應用中，磁盤介質在成本方面與磁帶介質之間有了可比性。因此說我們加快了這種向磁盤存儲結構轉移的趨勢。”

一個很好的例子就是，St. Peters Health Services，一家位于紐約的，擁有450個床位的醫院。這家醫院一直都希望將以前基于磁帶的備份轉移到磁盤系統上來，最終他們在2004年購買了基于磁盤的備份解決方案。但后來的轉移工作進展地很不順利。以至于這家醫院的IT經理Curt Damhof曾一度打算再回到以前磁帶廠商的懷抱。后來Damhof關注到了Avamar的Axion重復數據刪除方案，現在已經決定對其進行測試。

“它確實實現了此前的承諾，” Damhof說道，“我現在不再用磁帶進行備份了。所有的事情都轉移到磁盤上來了。考慮到其(指Axion的方案)效率上的優勢，我要把所有的事情都保存在磁盤上。它有足夠的理由吸引我這么做。此前我也關注過很多其它的方案，但由于那些方案都不具備重復數據刪除特性。因此在你把數據寫到磁盤上后，過一段時間你還是要向磁帶上轉移。因為有太多的數據需要放到磁盤上做長期的保存。”

做好自己的功課

“重復數據刪除技術為解決如今大型企業的IT挑戰提供兩個重要的特性，”Yueh說道，“首先它能夠降低當備份恢復應用由主存儲向二級存儲轉移時，產生的數據量暴增的程度。這不僅局限于數據中心內，所有那些也同樣面臨數據增長失控危機的異地分站點也同樣適用。其次它幫助用戶徹底摒棄了古老的IT處理方式，真正將你帶入21世紀。”

不過在你決定簽下數萬美元的支票采購任何一款重復數據刪除方案之前，都要像實施任何一個金額巨大的項目那樣，對每一個廠商的方案進行測試。

“這就如同買寶馬車一樣，你不能到了專賣店就說‘聽說這車時速可達150英里，我要了!’”Preston說道，“如果這點對你很重要，那么你就應該鉆進車里，然后把這車開到每小時150英里的速度去感受一下。”換句話說，在親身體驗之前，不要相信店員告訴你的任何事情。

“用戶對于廠商所宣傳的那些瑣碎的技術細節并不感興趣。他們最關心的就是最終能夠得到多大的壓縮率。也許這種方式的方案就很適合我的環境，而其他的則不理想。還有就是要花多少錢。”

此外，你還必須明確區分的事情包括：整體性能和單獨的備份流量性能;對于新近備份數據的恢復和對較早以前備份數據的恢復效果;同時恢復這兩類數據的情況;以及單獨恢復新近備份數據和單獨恢復較早以前備份數據的情況。

沒有一個產品會在所有的任務中呈現出相同水平的性能或功能表現。因此最終你必須明確對于自己來說哪些才是最重要的。