遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)及方法
【專利摘要】本發(fā)明公開了一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)及方法，方法包括：一節(jié)點上的數(shù)據(jù)存儲服務(wù)器在每個文件數(shù)據(jù)流進行數(shù)據(jù)傳輸時，均識別是否已經(jīng)傳輸過與當(dāng)前文件數(shù)據(jù)流一樣的文件數(shù)據(jù)流；若是，直接將當(dāng)前文件數(shù)據(jù)流的索引指向已經(jīng)傳輸過的相同文件數(shù)據(jù)流，并對當(dāng)前文件數(shù)據(jù)流刪除，確定將保存唯一文件數(shù)據(jù)流發(fā)送給數(shù)據(jù)中心服務(wù)器；數(shù)據(jù)中心服務(wù)器接收一節(jié)點上的數(shù)據(jù)存儲服務(wù)器重復(fù)數(shù)據(jù)刪除處理后的文件數(shù)據(jù)流，經(jīng)另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器轉(zhuǎn)發(fā)遠程站點服務(wù)器；由于數(shù)據(jù)存儲服務(wù)器查找定位重復(fù)的文件數(shù)據(jù)流，確保大量重復(fù)數(shù)據(jù)文件流不再重復(fù)傳輸，減少了數(shù)據(jù)傳輸量也節(jié)省了網(wǎng)絡(luò)帶寬和傳輸時間，并保障備份數(shù)據(jù)不占用遠程站點服務(wù)器大量的存儲空間。
【專利說明】遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)及方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及信息處理【技術(shù)領(lǐng)域】，尤其涉及一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)及方法。
【背景技術(shù)】
[0002]信息系統(tǒng)數(shù)據(jù)對任何企事業(yè)單位來說是非常重要的，目前有多種數(shù)據(jù)容災(zāi)備份方法來保護這些重要數(shù)據(jù)；其中:數(shù)據(jù)容災(zāi)備份，就是指建立一個異地的數(shù)據(jù)系統(tǒng)，為計算機信息系統(tǒng)提供的一個能應(yīng)付各種災(zāi)難的環(huán)境(例如火災(zāi)、水災(zāi)、地震、戰(zhàn)爭等不可抗拒的自然災(zāi)難以及計算機犯罪、計算機病毒、掉電、網(wǎng)絡(luò)/通信失敗、硬件/軟件錯誤和人為操作錯誤等人為災(zāi)難)，所以容災(zāi)備份系統(tǒng)也是保證用戶數(shù)據(jù)的安全性的重要保障。
[0003]參見圖1，目前常用的技術(shù)方法之一就是對這些重要數(shù)據(jù)進行本地數(shù)據(jù)備份，利用專業(yè)備份軟件把這些重要數(shù)據(jù)根據(jù)制定的備份策略把數(shù)據(jù)自動備份到磁帶庫、磁盤空間進行存放。
[0004]另一方法就是采用Mirror鏡像技術(shù),對集中到本地存儲設(shè)備的數(shù)據(jù)通過Mirror鏡像技術(shù)遠程復(fù)制到異地機房的存儲設(shè)備進行保存。當(dāng)這些數(shù)據(jù)損壞、誤刪、修改后，如果需要恢復(fù)某一時段的數(shù)據(jù)時，可以利用存放在本地磁帶庫、磁盤的數(shù)據(jù)進行有效的恢復(fù)，或通過異地存放的數(shù)據(jù)進行恢復(fù)。
[0005]顯然，上述兩個備份方法都存在技術(shù)缺陷:本地數(shù)據(jù)備份到磁帶庫、磁盤陣列的技術(shù)方法會面臨多種挑戰(zhàn)，有很多弊端:磁帶庫使用的磁帶容易損壞不利于保管；磁帶用于災(zāi)難恢復(fù)和還原不可靠；隨著數(shù)據(jù)量的大增，需要的磁帶越來越多，更不易保管；磁盤庫沒有RAID的保護機制，磁帶損壞時，備份數(shù)據(jù)就丟失；磁帶庫所提供的備份速度經(jīng)常不能滿足數(shù)據(jù)備份需要。用磁盤陣列當(dāng)備份介質(zhì)時會面臨當(dāng)備份數(shù)據(jù)量大時，備份數(shù)據(jù)保留時間長時，需要大量的磁盤空間；磁盤陣列不能多路并發(fā)處理備份數(shù)據(jù)，備份速度經(jīng)常不滿足需要。
[0006]通過將集中到本地存儲設(shè)備的數(shù)據(jù)通過Mirror鏡像技術(shù)遠程復(fù)制到異地機房的存儲設(shè)備進行保存會面臨需要兩地機房的網(wǎng)絡(luò)帶寬足夠大時才能傳輸備份數(shù)據(jù)量，大量數(shù)據(jù)需要復(fù)制時，需要數(shù)據(jù)傳輸時間就較長，尤其是對于跨度達到2000公里的不同城市，現(xiàn)有數(shù)據(jù)備份這種技術(shù)方法往往不能使用。

【發(fā)明內(nèi)容】

[0007]本發(fā)明的目的在于提供一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)及方法，以解決上述問題。
[0008]為了達到上述目的，本發(fā)明的技術(shù)方案是這樣實現(xiàn)的:
[0009]本發(fā)明提供了一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)，包括多個數(shù)據(jù)存儲服務(wù)器、本地磁盤數(shù)據(jù)庫、數(shù)據(jù)中心服務(wù)器和多個遠程站點服務(wù)器，其中:
[0010]每個所述數(shù)據(jù)存儲服務(wù)器設(shè)置在所述數(shù)據(jù)中心服務(wù)器與本地磁盤數(shù)據(jù)庫之間，或所述數(shù)據(jù)中心服務(wù)器與遠程站點服務(wù)器之間；所述數(shù)據(jù)中心服務(wù)器分別與多個數(shù)據(jù)存儲服務(wù)器通信連接；
[0011]所述數(shù)據(jù)存儲服務(wù)器，用于對文件數(shù)據(jù)流執(zhí)行重復(fù)數(shù)據(jù)刪除處理操作；在每個文件數(shù)據(jù)流進行數(shù)據(jù)傳輸時，均識別是否已經(jīng)傳輸過與當(dāng)前文件數(shù)據(jù)流一樣的文件數(shù)據(jù)流；若是，則直接將當(dāng)前文件數(shù)據(jù)流的索引指向已經(jīng)傳輸過的相同文件數(shù)據(jù)流，并對當(dāng)前文件數(shù)據(jù)流進行刪除，確定將保存唯一的文件數(shù)據(jù)流發(fā)送給數(shù)據(jù)中心服務(wù)器；
[0012]所述數(shù)據(jù)中心服務(wù)器，用于接收一個節(jié)點上的數(shù)據(jù)存儲服務(wù)器重復(fù)數(shù)據(jù)刪除處理后的文件數(shù)據(jù)流并存儲，并轉(zhuǎn)發(fā)給另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器；
[0013]所述遠程站點服務(wù)器，用于接收另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器發(fā)送的文件數(shù)據(jù)流，并存儲。
[0014]相應(yīng)地，本發(fā)明還提供了一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份方法，包括如下步驟:
[0015]一節(jié)點上的數(shù)據(jù)存儲服務(wù)器在每個文件數(shù)據(jù)流進行數(shù)據(jù)傳輸時，均識別是否已經(jīng)傳輸過與當(dāng)前文件數(shù)據(jù)流一樣的文件數(shù)據(jù)流；若是，則直接將當(dāng)前文件數(shù)據(jù)流的索引指向已經(jīng)傳輸過的相同文件數(shù)據(jù)流，并對當(dāng)前文件數(shù)據(jù)流進行刪除，確定將保存唯一的文件數(shù)據(jù)流發(fā)送給數(shù)據(jù)中心服務(wù)器；
[0016]數(shù)據(jù)中心服務(wù)器接收一個節(jié)點上的數(shù)據(jù)存儲服務(wù)器重復(fù)數(shù)據(jù)刪除處理后的文件數(shù)據(jù)流并存儲，并轉(zhuǎn)發(fā)給另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器；
[0017]所述遠程站點服務(wù)器接收另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器發(fā)送的文件數(shù)據(jù)流，并存儲。
[0018]與現(xiàn)有技術(shù)相比，本發(fā)明實施例的優(yōu)點在于:
[0019]分析上述遠距離廣域網(wǎng)絡(luò)容災(zāi)備份方法可知:每個數(shù)據(jù)存儲服務(wù)器構(gòu)成了上述備份系統(tǒng)中一個用于重復(fù)數(shù)據(jù)刪除的設(shè)備節(jié)點。在本地磁盤數(shù)據(jù)庫進行文件數(shù)據(jù)流傳輸時，均需要經(jīng)過數(shù)據(jù)存儲服務(wù)器進行重復(fù)數(shù)據(jù)刪除，即識別是否已經(jīng)傳輸過與當(dāng)前文件數(shù)據(jù)流一樣的文件數(shù)據(jù)流；若是，則直接將當(dāng)前文件數(shù)據(jù)流的索引指向已經(jīng)傳輸過的相同文件數(shù)據(jù)流，并對當(dāng)前文件數(shù)據(jù)流進行刪除，確定將保存唯一的文件數(shù)據(jù)流發(fā)送給數(shù)據(jù)中心服務(wù)器；再由數(shù)據(jù)中心服務(wù)器將處理后的文件數(shù)據(jù)流發(fā)送給另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器，該數(shù)據(jù)存儲服務(wù)器將文件數(shù)據(jù)流遷移至遠程站點服務(wù)器上存儲。
[0020]顯然在上述數(shù)據(jù)遷移過程中，數(shù)據(jù)存儲服務(wù)器查找定位重復(fù)的文件數(shù)據(jù)流，在數(shù)據(jù)傳輸過程中確保大量重復(fù)數(shù)據(jù)文件流不再重復(fù)傳輸(避免了現(xiàn)有技術(shù)中的復(fù)制大量的重復(fù)數(shù)據(jù))，這樣減少了數(shù)據(jù)傳輸量，也節(jié)省了網(wǎng)絡(luò)帶寬和傳輸時間，減輕了遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)的所使用的網(wǎng)絡(luò)負載，同時可以保障備份數(shù)據(jù)不會占用大量的網(wǎng)絡(luò)帶寬和遠程站點服務(wù)器的剩余存儲空間，減輕了遠程站點服務(wù)器端的壓力數(shù)據(jù)存儲負擔(dān)。
【專利附圖】

【附圖說明】
[0021]圖1為現(xiàn)有技術(shù)中的網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)的結(jié)構(gòu)示意圖；
[0022]圖2為本發(fā)明實施例提供的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份方法的系統(tǒng)架構(gòu)示意圖；
[0023]圖3為本發(fā)明實施例提供的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份方法的流程示意圖。
【具體實施方式】[0024]下面通過具體的實施例子并結(jié)合附圖對本發(fā)明做進一步的詳細描述。
[0025]參見圖2，本發(fā)明實施例提供了一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)1，包括多個數(shù)據(jù)存儲服務(wù)器10、本地磁盤數(shù)據(jù)庫11、數(shù)據(jù)中心服務(wù)器12和多個遠程站點服務(wù)器13，其中:
[0026]每個所述數(shù)據(jù)存儲服務(wù)器10設(shè)置在所述數(shù)據(jù)中心服務(wù)器12與本地磁盤數(shù)據(jù)庫11之間，或所述數(shù)據(jù)中心服務(wù)器12與遠程站點服務(wù)器13之間；所述數(shù)據(jù)中心服務(wù)器12分別與多個數(shù)據(jù)存儲服務(wù)器10通信連接；
[0027]所述數(shù)據(jù)存儲服務(wù)器10，用于對文件數(shù)據(jù)流執(zhí)行重復(fù)數(shù)據(jù)刪除處理操作(即參與重復(fù)數(shù)據(jù)刪除技術(shù)，通過重復(fù)數(shù)據(jù)刪除，把少量的不重復(fù)的文件數(shù)據(jù)流異地遠程傳輸?shù)疆惖貦C房的遠程站點服務(wù)器進行異地備份，即包括異地全局文件系統(tǒng))；執(zhí)行重復(fù)數(shù)據(jù)刪除處理操作，包括如下步驟:在每個文件數(shù)據(jù)流進行數(shù)據(jù)傳輸時，均識別是否已經(jīng)傳輸過與當(dāng)前文件數(shù)據(jù)流一樣的文件數(shù)據(jù)流；若是，則直接將當(dāng)前文件數(shù)據(jù)流的索引指向已經(jīng)傳輸過的相同文件數(shù)據(jù)流，并對當(dāng)前文件數(shù)據(jù)流進行刪除，確定將保存唯一的文件數(shù)據(jù)流發(fā)送給數(shù)據(jù)中心服務(wù)器12 ；
[0028]所述數(shù)據(jù)中心服務(wù)器12，用于接收一個節(jié)點上的數(shù)據(jù)存儲服務(wù)器重復(fù)數(shù)據(jù)刪除處理后的文件數(shù)據(jù)流并存儲，并轉(zhuǎn)發(fā)給另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器；
[0029]所述多個遠程站點服務(wù)器13，用于接收另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器發(fā)送的文件數(shù)據(jù)流，并存儲。
[0030]其中，需要說明的是，異地全局文件系統(tǒng)包括多個數(shù)據(jù)存儲服務(wù)器和對應(yīng)的多個遠程站點服務(wù)器；
[0031]分析上述遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)的架構(gòu)可知:每個數(shù)據(jù)存儲服務(wù)器構(gòu)成了上述備份系統(tǒng)中一個用于重復(fù)數(shù)據(jù)刪除的設(shè)備節(jié)點。在本地磁盤數(shù)據(jù)庫進行文件數(shù)據(jù)流傳輸時，均需要經(jīng)過數(shù)據(jù)存儲服務(wù)器進行重復(fù)數(shù)據(jù)刪除，即識別是否已經(jīng)傳輸過與當(dāng)前文件數(shù)據(jù)流一樣的文件數(shù)據(jù)流；若是，則直接將當(dāng)前文件數(shù)據(jù)流的索引指向已經(jīng)傳輸過的相同文件數(shù)據(jù)流，并對當(dāng)前文件數(shù)據(jù)流進行刪除，確定將保存唯一的文件數(shù)據(jù)流發(fā)送給數(shù)據(jù)中心服務(wù)器；再由數(shù)據(jù)中心服務(wù)器將處理后的文件數(shù)據(jù)流發(fā)送給另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器，該數(shù)據(jù)存儲服務(wù)器將文件數(shù)據(jù)流遷移至遠程站點服務(wù)器上存儲。
[0032]顯然在上述數(shù)據(jù)遷移過程中，數(shù)據(jù)存儲服務(wù)器查找定位重復(fù)的文件數(shù)據(jù)流，在數(shù)據(jù)傳輸過程中確保大量重復(fù)數(shù)據(jù)文件流不再重復(fù)傳輸(避免了現(xiàn)有技術(shù)中的復(fù)制大量的重復(fù)數(shù)據(jù))，這樣減少了數(shù)據(jù)傳輸量，也節(jié)省了網(wǎng)絡(luò)帶寬和傳輸時間，減輕了遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)的所使用的網(wǎng)絡(luò)負載，同時可以保障備份數(shù)據(jù)不會占用大量的網(wǎng)絡(luò)帶寬(保障了容災(zāi)備份系統(tǒng)網(wǎng)絡(luò)運行的穩(wěn)定性)和遠程站點服務(wù)器的剩余存儲空間，減輕了遠程站點服務(wù)器端的壓力數(shù)據(jù)存儲負擔(dān)。
[0033]下面對本發(fā)明提供的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)的具體架構(gòu)做進一步說明:
[0034]較佳地，所述數(shù)據(jù)中心服務(wù)器分別與多個數(shù)據(jù)存儲服務(wù)器建立廣域網(wǎng)WAN通信連接。
[0035]較佳地，所述本地磁盤數(shù)據(jù)庫包括多個磁盤陣列設(shè)備。
[0036]較佳地，所述數(shù)據(jù)中心服務(wù)器，還用于在本地磁盤數(shù)據(jù)庫存儲的文件數(shù)據(jù)流需要執(zhí)行恢復(fù)時，向多個遠程站點服務(wù)器接收備份的文件數(shù)據(jù)流，并進行匯聚復(fù)制，將復(fù)制備份后的文件數(shù)據(jù)流發(fā)送給所述數(shù)據(jù)存儲服務(wù)器；
[0037]所述數(shù)據(jù)存儲服務(wù)器，還用于將復(fù)制備份的文件數(shù)據(jù)流經(jīng)重復(fù)數(shù)據(jù)刪除處理后，發(fā)送給本地磁盤數(shù)據(jù)庫。
[0038]需要說明的是，檢測本地磁盤數(shù)據(jù)庫的存儲的文件數(shù)據(jù)流是否需要容災(zāi)備份(若發(fā)生了嚴重數(shù)據(jù)損壞時，應(yīng)該啟動文件數(shù)據(jù)流的備份操作)，即數(shù)據(jù)中心服務(wù)器向多個遠程站點服務(wù)器接收備份的文件數(shù)據(jù)流，并進行匯聚復(fù)制，將復(fù)制備份后的文件數(shù)據(jù)流發(fā)送給所述數(shù)據(jù)存儲服務(wù)器；顯然在上述文件數(shù)據(jù)流的備份時，數(shù)據(jù)存儲服務(wù)器將對需要備份的文件數(shù)據(jù)流執(zhí)行重復(fù)數(shù)據(jù)刪除處理，保障減少了需要復(fù)制的數(shù)據(jù)量。例如，在完整備份的內(nèi)容中，序列經(jīng)過壓縮后，通常只有不到1%是真正的、具有唯一性的新內(nèi)容，只有這些內(nèi)容才需通過WAN進行復(fù)制。由于備份數(shù)據(jù)被大量重復(fù)數(shù)據(jù)刪除處理，這樣可以保障備份數(shù)據(jù)不會占用大量的網(wǎng)絡(luò)帶寬(保障了容災(zāi)備份系統(tǒng)網(wǎng)絡(luò)運行的穩(wěn)定性)和遠程站點服務(wù)器的剩余存儲空間。
[0039]基于同一發(fā)明構(gòu)思，本發(fā)明實施例還提供了一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份方法，由于此方法解決問題的原理通過前述一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份的系統(tǒng)來實現(xiàn)，因此該方法的實施可以參見前述系統(tǒng)功能的實施，重復(fù)之處不再贅述。
[0040]參見圖3，相應(yīng)地，本發(fā)明實施例還提供了一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份方法，包括如下步驟:
[0041]步驟S100、一節(jié)點上的數(shù)據(jù)存儲服務(wù)器在每個文件數(shù)據(jù)流進行數(shù)據(jù)傳輸時，均識別是否已經(jīng)傳輸過與當(dāng)前文件數(shù)據(jù)流一樣的文件數(shù)據(jù)流；若是，則直接將當(dāng)前文件數(shù)據(jù)流的索引指向已經(jīng)傳輸過的相同文件數(shù)據(jù)流，并對當(dāng)前文件數(shù)據(jù)流進行刪除，確定將保存唯一的文件數(shù)據(jù)流發(fā)送給數(shù)據(jù)中心服務(wù)器；
[0042]步驟S200、數(shù)據(jù)中心服務(wù)器接收一個節(jié)點上的數(shù)據(jù)存儲服務(wù)器重復(fù)數(shù)據(jù)刪除處理后的文件數(shù)據(jù)流并存儲，并轉(zhuǎn)發(fā)給另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器；
[0043]步驟S300、所述遠程站點服務(wù)器接收另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器發(fā)送的文件數(shù)據(jù)流，并存儲。
[0044]較佳地，在步驟S300之后(即在所述遠程站點服務(wù)器接收另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器發(fā)送的文件數(shù)據(jù)流，并存儲的步驟之后)，還包括如下步驟:
[0045]步驟S400、所述數(shù)據(jù)中心服務(wù)器在本地磁盤數(shù)據(jù)庫存儲的文件數(shù)據(jù)流需要執(zhí)行恢復(fù)時，向多個遠程站點服務(wù)器接收備份的文件數(shù)據(jù)流，并進行匯聚復(fù)制，將復(fù)制備份后的文件數(shù)據(jù)流發(fā)送給所述數(shù)據(jù)存儲服務(wù)器；
[0046]步驟S500、所述數(shù)據(jù)存儲服務(wù)器將復(fù)制備份的文件數(shù)據(jù)流經(jīng)重復(fù)數(shù)據(jù)刪除處理后(將在多個遠程站點服務(wù)器之間進行重復(fù)數(shù)據(jù)文件流的識別，并刪除重復(fù)數(shù)據(jù))，發(fā)送給本地磁盤數(shù)據(jù)庫。
[0047]在上述步驟S500中，所述數(shù)據(jù)存儲服務(wù)器將復(fù)制備份的文件數(shù)據(jù)流經(jīng)重復(fù)數(shù)據(jù)刪除處理后，發(fā)送給本地磁盤數(shù)據(jù)庫，包括如下步驟:
[0048]步驟S510、所述數(shù)據(jù)存儲服務(wù)器將在多個遠程站點服務(wù)器之間進行重復(fù)數(shù)據(jù)文件流的識別，并刪除重復(fù)數(shù)據(jù)文件流；
[0049]步驟S520、將多個遠程站點服務(wù)器之間保存唯一的文件數(shù)據(jù)流發(fā)送給本地磁盤數(shù)據(jù)庫。[0050]需要說明的是，在步驟S500中，如果從多個遠程站點服務(wù)器向同一個目標(biāo)(例如本地磁盤數(shù)據(jù)庫)復(fù)制數(shù)據(jù)，便可采用跨站點重復(fù)數(shù)據(jù)消除。這樣之前從任何遠程站點傳輸?shù)幕蛞虮镜貍浞荻a(chǎn)生的任何冗余數(shù)據(jù)段，都不會由其他遠程站點重復(fù)復(fù)制，從而節(jié)約了寶貴的網(wǎng)絡(luò)帶寬?？缯军c重復(fù)數(shù)據(jù)消除可提高所有站點的網(wǎng)絡(luò)效率，并減少目標(biāo)處所需的存儲，從而進一步提高了重復(fù)數(shù)據(jù)消除效率。
[0051]需要說明的是，本發(fā)明實施例還提供了一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)，主要依靠重復(fù)數(shù)據(jù)消除存儲技術(shù)； [0052]高速線內(nèi)重復(fù)數(shù)據(jù)消除和網(wǎng)絡(luò)高效型復(fù)制:使用重復(fù)數(shù)據(jù)消除，可將保留和保護數(shù)據(jù)所需要的磁盤存儲容量減少至1/10-1/30甚至減少更多，從而使磁盤成為了磁帶的經(jīng)濟高效取代者。磁盤上的數(shù)據(jù)可以在線使用，并且可在現(xiàn)場保留更長時間，還原操作將變得快速且可靠。由于僅在磁盤上存儲唯一的數(shù)據(jù)，因而可通過現(xiàn)有網(wǎng)絡(luò)將數(shù)據(jù)經(jīng)濟高效地復(fù)制到遠程站點服務(wù)器，以便實現(xiàn)災(zāi)難恢復(fù)(DR)和整合式磁帶操作。
[0053]重復(fù)數(shù)據(jù)消除存儲系統(tǒng)可輕松地與現(xiàn)有基礎(chǔ)架構(gòu)集成，并且可與多種數(shù)據(jù)移動器和應(yīng)用程序工作負載無縫地搭配使用。通過整合到一個基于磁盤的共用目標(biāo)，您將不再創(chuàng)建數(shù)據(jù)和存儲的“孤島”。使用一個重復(fù)數(shù)據(jù)消除存儲系統(tǒng)即可執(zhí)行備份和恢復(fù)、保護企業(yè)應(yīng)用程序(Oracle、Microsoft? Exchange、VMware和其他應(yīng)用程序)、歸檔和在線引用存儲。
[0054]分布式企業(yè)中的重復(fù)數(shù)據(jù)消除存儲系統(tǒng):重復(fù)數(shù)據(jù)消除存儲系統(tǒng)可在備份過程中對數(shù)據(jù)進行線內(nèi)重復(fù)數(shù)據(jù)消除。數(shù)據(jù)經(jīng)過重復(fù)數(shù)據(jù)消除后，可以存儲在現(xiàn)場以便立即還原， 也可以長期保留在磁盤上。經(jīng)過重復(fù)數(shù)據(jù)消除的數(shù)據(jù)還可以通過WAN復(fù)制到遠程站點服務(wù)器，以便執(zhí)行災(zāi)難恢復(fù)操作，從而不再需要進行基于磁帶的備份，也無需將磁帶備份整合到一個中心位置。重復(fù)數(shù)據(jù)消除存儲系統(tǒng)提供了可優(yōu)化備份的靈活復(fù)制技術(shù)，這些技術(shù)包括完整系統(tǒng)鏡像、一到多(例如:數(shù)據(jù)中心服務(wù)器到多個遠程站點服務(wù)器)、選擇性、雙向(例如:本地磁盤數(shù)據(jù)庫與遠程站點的雙向數(shù)據(jù)傳輸)、多到一和級聯(lián)復(fù)制。
[0055]超遠距離遠程站點服務(wù)器的數(shù)據(jù)存儲服務(wù)器，在向本地磁盤數(shù)據(jù)庫或異地全局文件系統(tǒng)傳輸備份數(shù)據(jù)。倘若使用重復(fù)數(shù)據(jù)消除技術(shù)，當(dāng)有兩個完全相同的文件數(shù)據(jù)流(雙列直插數(shù)據(jù))，重復(fù)數(shù)據(jù)刪除引擎會對每個文件進行重復(fù)數(shù)據(jù)的排除，并代之以指向第一份數(shù)據(jù)的索引；而重復(fù)數(shù)據(jù)刪除則能分辨出兩個文件完全相同，從而只保存第一個文件。而且， 它還跟數(shù)據(jù)壓縮一樣，排除掉第一個文件里的重復(fù)數(shù)據(jù)，使實際存儲的數(shù)據(jù)進一步減少。最終在全局文件存儲系統(tǒng)中保留的單一的文件，大大減少超遠距離廣域網(wǎng)傳輸?shù)臄?shù)據(jù)量，節(jié)約存儲空間和節(jié)省帶寬投資成本。
[0056]重復(fù)數(shù)據(jù)消除存儲系統(tǒng)可將較小的遠程辦公室裝置擴展為大型數(shù)據(jù)中心系統(tǒng)。這些系統(tǒng)可作為集成裝置或采用外部存儲的網(wǎng)關(guān)使用。
[0057]下面介紹一下本發(fā)明涉及的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)實際應(yīng)用時的技術(shù)特
占-
^ \\\ ?
[0058]由以CPU為中心的體系結(jié)構(gòu)提供支持的高速線內(nèi)重復(fù)數(shù)據(jù)消除:重復(fù)數(shù)據(jù)消除存儲系統(tǒng)可在備份過程中對數(shù)據(jù)進行線內(nèi)重復(fù)數(shù)據(jù)消除，使數(shù)據(jù)在放置至磁盤之前便已經(jīng)過重復(fù)數(shù)據(jù)消除，從而只需原始數(shù)據(jù)集的小部分磁盤空間。數(shù)據(jù)已做好“災(zāi)難恢復(fù)準(zhǔn)備”，可通過現(xiàn)有廣域網(wǎng)(WAN)基礎(chǔ)架構(gòu)快速、高效地恢復(fù)。Stream-1nformed SegmentLayout(SISLTM)擴展體系結(jié)構(gòu)可利用CPU性能的持續(xù)改進，直接為系統(tǒng)吞吐量的提升帶來裨益。
[0059]易于集成:重復(fù)數(shù)據(jù)消除存儲系統(tǒng)經(jīng)驗證可與所有主流的企業(yè)備份軟件和歸檔應(yīng)用程序配合運行，并可以輕松集成到現(xiàn)有的存儲基礎(chǔ)架構(gòu)中，而不必更改數(shù)據(jù)中心或分布式辦公室的數(shù)據(jù)保護方案。
[0060]多站點災(zāi)難恢復(fù):重復(fù)數(shù)據(jù)消除存儲系統(tǒng)支持從最多180個遠程站點進行匯聚復(fù)制?？缯军c重復(fù)數(shù)據(jù)消除最大限度地減少了所有站點之間所需的帶寬，因為跨任何WAN網(wǎng)段時都只傳輸數(shù)據(jù)的第一個實例。數(shù)據(jù)集被有效地壓縮了 99%，這一大小使網(wǎng)絡(luò)高效型復(fù)制變得迅速且可靠。
[0061]可靠恢復(fù):從最初備份起到數(shù)據(jù)的整個生命周期，重復(fù)數(shù)據(jù)消除存儲數(shù)據(jù)無損體系結(jié)構(gòu)都可提供連續(xù)的恢復(fù)驗證，并持續(xù)檢測和預(yù)防數(shù)據(jù)完整性問題。與任何其他企業(yè)級陣列或文件系統(tǒng)都不同的是，每一裝置都可確?？苫謴?fù)性得到驗證，然后持續(xù)執(zhí)行重新驗證。這些系統(tǒng)配置有雙磁盤奇偶校驗RAID-6，如果兩個磁盤同時發(fā)生故障，此功能將對系統(tǒng)給予保護。
[0062]操作簡潔性:重復(fù)數(shù)據(jù)消除存儲系統(tǒng)易于安裝和管理，從而降低了管理和運營成本。所有重復(fù)數(shù)據(jù)消除存儲系統(tǒng)都具有自動呼叫總部系統(tǒng)報告功能(稱為自動支持)，此功能可提供有關(guān)整個系統(tǒng)狀態(tài)的電子郵件通知。這種無干擾警報和數(shù)據(jù)收集功能有助于實現(xiàn)主動預(yù)防性支持和服務(wù)，無需管理員干預(yù)，從而進一步簡化了日常管理。
[0063]策略靈活:重復(fù)數(shù)據(jù)消除存儲可應(yīng)用多種復(fù)制策略，這些策略包括完整系統(tǒng)鏡像、一到多、選擇性、雙向、多到一和級聯(lián)復(fù)制。
[0064]實現(xiàn)兩個級別的帶寬縮減:本地磁盤數(shù)據(jù)庫和跨站點重復(fù)數(shù)據(jù)消除。重復(fù)數(shù)據(jù)消除存儲重復(fù)數(shù)據(jù)消除大幅減少了本地存儲的數(shù)據(jù)量，進而減少了需要復(fù)制的數(shù)據(jù)量。例如，在完整備份的內(nèi)容中，序列經(jīng)過壓縮后，通常只有不到1%是真正的、具有唯一性的新內(nèi)容，只有這些內(nèi)容才需通過WAN進行復(fù)制。
[0065]重復(fù)數(shù)據(jù)消除存儲應(yīng)用:(即95-99%的跨站點帶寬節(jié)約)，如果從多個遠程站點服務(wù)器向同一個目標(biāo)系統(tǒng)復(fù)制數(shù)據(jù)，便可采用跨站點重復(fù)數(shù)據(jù)消除。之前從任何遠程站點傳輸?shù)幕蛞虮镜貍浞荻a(chǎn)生的任何冗余數(shù)據(jù)段都不會由其他遠程站點重復(fù)復(fù)制，從而節(jié)約了寶貴的網(wǎng)絡(luò)帶寬?？缯军c重復(fù)數(shù)據(jù)消除可提高所有站點的網(wǎng)絡(luò)效率，并減少目標(biāo)處所需的存儲，從而進一步提高了重復(fù)數(shù)據(jù)消除效率。
[0066]本領(lǐng)域技術(shù)人員應(yīng)該可以理解:本發(fā)明實施例提供的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)及方法，通過具有重復(fù)數(shù)據(jù)刪除技術(shù)的存儲系統(tǒng)就可以實現(xiàn)超遠程異地城市遠程數(shù)據(jù)復(fù)制，通過已實現(xiàn)數(shù)據(jù)重復(fù)數(shù)據(jù)刪除的數(shù)據(jù)，把少量的數(shù)據(jù)異地遠程傳輸?shù)疆惖貦C房進行異地備份，以解決本地磁盤數(shù)據(jù)庫與遠程站點服務(wù)器之間異地數(shù)據(jù)備份的技術(shù)缺陷。
[0067]以上所述僅為本發(fā)明的優(yōu)選實施例而已，并不用于限制本發(fā)明，對于本領(lǐng)域的技術(shù)人員來說，本發(fā)明可以有各種更改和變化。凡在本發(fā)明的精神和原則之內(nèi)，所作的任何修改、等同替換、改進等，均應(yīng)包含在本發(fā)明的保護范圍之內(nèi)。
【權(quán)利要求】
1.一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)，其特征在于，包括多個數(shù)據(jù)存儲服務(wù)器、本地磁盤數(shù)據(jù)庫、數(shù)據(jù)中心服務(wù)器和多個遠程站點服務(wù)器，其中: 每個所述數(shù)據(jù)存儲服務(wù)器設(shè)置在所述數(shù)據(jù)中心服務(wù)器與本地磁盤數(shù)據(jù)庫之間，或所述數(shù)據(jù)中心服務(wù)器與遠程站點服務(wù)器之間；所述數(shù)據(jù)中心服務(wù)器分別與多個數(shù)據(jù)存儲服務(wù)器通信連接； 所述數(shù)據(jù)存儲服務(wù)器，用于對文件數(shù)據(jù)流執(zhí)行重復(fù)數(shù)據(jù)刪除處理操作；在每個文件數(shù)據(jù)流進行數(shù)據(jù)傳輸時，均識別是否已經(jīng)傳輸過與當(dāng)前文件數(shù)據(jù)流一樣的文件數(shù)據(jù)流；若是，則直接將當(dāng)前文件數(shù)據(jù)流的索引指向已經(jīng)傳輸過的相同文件數(shù)據(jù)流，并對當(dāng)前文件數(shù)據(jù)流進行刪除，確定將保存唯一的文件數(shù)據(jù)流發(fā)送給數(shù)據(jù)中心服務(wù)器； 所述數(shù)據(jù)中心服務(wù)器，用于接收一個節(jié)點上的數(shù)據(jù)存儲服務(wù)器重復(fù)數(shù)據(jù)刪除處理后的文件數(shù)據(jù)流并存儲，并轉(zhuǎn)發(fā)給另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器； 所述遠程站點服務(wù)器，用于接收另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器發(fā)送的文件數(shù)據(jù)流，并存儲。
2.如權(quán)利要求1所述的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)，其特征在于， 所述數(shù)據(jù)中心服務(wù)器分別與多個數(shù)據(jù)存儲服務(wù)器建立廣域網(wǎng)WAN通信連接。
3.如權(quán)利要求1所述的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)，其特征在于， 所述本地磁盤數(shù)據(jù)庫包括多個磁盤陣列設(shè)備。
4.如權(quán)利要求3所述的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份系統(tǒng)，其特征在于， 所述數(shù)據(jù)中心服務(wù)器，還用于在本地磁盤數(shù)據(jù)庫存儲的文件數(shù)據(jù)流需要執(zhí)行恢復(fù)時，向多個遠程站點服務(wù)器接收備份的文件數(shù)據(jù)流，并進行匯聚復(fù)制，將復(fù)制備份后的文件數(shù)據(jù)流發(fā)送給所述數(shù)據(jù)存儲服務(wù)器； 所述數(shù)據(jù)存儲服務(wù)器，還用于將復(fù)制備份的文件數(shù)據(jù)流經(jīng)重復(fù)數(shù)據(jù)刪除處理后，發(fā)送給本地磁盤數(shù)據(jù)庫。
5.一種遠距離廣域網(wǎng)絡(luò)容災(zāi)備份方法，其特征在于，包括如下步驟: 一節(jié)點上的數(shù)據(jù)存儲服務(wù)器在每個文件數(shù)據(jù)流進行數(shù)據(jù)傳輸時，均識別是否已經(jīng)傳輸過與當(dāng)前文件數(shù)據(jù)流一樣的文件數(shù)據(jù)流；若是，則直接將當(dāng)前文件數(shù)據(jù)流的索引指向已經(jīng)傳輸過的相同文件數(shù)據(jù)流，并對當(dāng)前文件數(shù)據(jù)流進行刪除，確定將保存唯一的文件數(shù)據(jù)流發(fā)送給數(shù)據(jù)中心服務(wù)器； 數(shù)據(jù)中心服務(wù)器接收一個節(jié)點上的數(shù)據(jù)存儲服務(wù)器重復(fù)數(shù)據(jù)刪除處理后的文件數(shù)據(jù)流并存儲，并轉(zhuǎn)發(fā)給另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器； 所述遠程站點服務(wù)器接收另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器發(fā)送的文件數(shù)據(jù)流，并存儲。
6.如權(quán)利要求5所述的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份方法，其特征在于， 在所述遠程站點服務(wù)器接收另一節(jié)點上的數(shù)據(jù)存儲服務(wù)器發(fā)送的文件數(shù)據(jù)流，并存儲之后，還包括如下步驟: 所述數(shù)據(jù)中心服務(wù)器在本地磁盤數(shù)據(jù)庫存儲的文件數(shù)據(jù)流需要執(zhí)行恢復(fù)時，向多個遠程站點服務(wù)器接收備份的文件數(shù)據(jù)流，并進行匯聚復(fù)制，將復(fù)制備份后的文件數(shù)據(jù)流發(fā)送給所述數(shù)據(jù)存儲服務(wù)器； 所述數(shù)據(jù)存儲服務(wù)器將復(fù)制備份的文件數(shù)據(jù)流經(jīng)重復(fù)數(shù)據(jù)刪除處理后，發(fā)送給本地磁盤數(shù)據(jù)庫。
7.如權(quán)利要求6所述的遠距離廣域網(wǎng)絡(luò)容災(zāi)備份方法，其特征在于， 所述數(shù)據(jù)存儲服務(wù)器將復(fù)制備份的文件數(shù)據(jù)流經(jīng)重復(fù)數(shù)據(jù)刪除處理后，發(fā)送給本地磁盤數(shù)據(jù)庫，包括如下步驟: 所述數(shù)據(jù)存儲服務(wù)器將在多個遠程站點服務(wù)器之間進行重復(fù)數(shù)據(jù)文件流的識別，并刪除重復(fù)數(shù)據(jù)文件流； 將多個遠程站點服務(wù) 器之間保存唯一的文件數(shù)據(jù)流發(fā)送給本地磁盤數(shù)據(jù)庫。
【文檔編號】G06F17/30GK103593264SQ201310625829
【公開日】2014年2月19日 申請日期:2013年11月28日 優(yōu)先權(quán)日:2013年11月28日
【發(fā)明者】梁柏山, 楊啟蓓 申請人:中國南方電網(wǎng)有限責(zé)任公司超高壓輸電公司南寧局