專利名稱：固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本實(shí)用新型涉及一種固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)。
背景技術(shù)：
固定內(nèi)容(Fixed Content)就是自創(chuàng)建以后不再更改并具有長時(shí)間保存價(jià)值的數(shù)據(jù)對(duì)象，如辦公office文檔、E-mail、電視新聞、醫(yī)療圖片、天文圖像、音頻、視頻，電信、 銀行和電業(yè)等部門的數(shù)據(jù)庫交易記錄，以及無線傳感網(wǎng)絡(luò)經(jīng)過加工處理后的信息等。固定內(nèi)容包含了與企業(yè)業(yè)務(wù)相關(guān)的內(nèi)容，可為企業(yè)提供有價(jià)值的信息，固也稱之為參考數(shù)據(jù) (Reference Data)。IDC在《2008年存儲(chǔ)市場(chǎng)的發(fā)展現(xiàn)狀及趨勢(shì)分析報(bào)告》指出，從2006年到2011年5年當(dāng)中，數(shù)據(jù)的產(chǎn)生到我們對(duì)數(shù)據(jù)進(jìn)行保存以及維護(hù)或者是備份、歸檔一系列的環(huán)節(jié)下來整個(gè)數(shù)據(jù)量增長了 10倍。在數(shù)據(jù)的增長當(dāng)中，非結(jié)構(gòu)化或半結(jié)構(gòu)化的數(shù)據(jù)(固定內(nèi)容數(shù)據(jù))越來越多，會(huì)占用我們整個(gè)存儲(chǔ)容量的90%以上。固定內(nèi)容是非結(jié)構(gòu)化或半結(jié)構(gòu)化數(shù)據(jù)，企業(yè)存儲(chǔ)的固定內(nèi)容信息隨時(shí)間增長變得十分巨大，這些海量的固定信息是企業(yè)的重要財(cái)富。例如，醫(yī)生可從醫(yī)院海量醫(yī)療圖像信息和診斷病歷中檢索到所要的案例，或挖掘診斷某種疾病的規(guī)律；電信或銀行等部門能從海量數(shù)據(jù)庫交易記錄中挖掘客戶流失或增加客戶量的規(guī)律等；在教育系統(tǒng)中，學(xué)?？梢詮谋究啤⒋T士和博士的論文，以及各種學(xué)習(xí)文檔中挖掘有用的教學(xué)和科研信息；天文工作者可以從海量的天文圖像信息找到新的發(fā)現(xiàn)。但采用傳統(tǒng)的存儲(chǔ)方式從海量固定內(nèi)容數(shù)據(jù)中找到需要的內(nèi)容非常困難，并且其中大部分內(nèi)容隨時(shí)間的增長甚至變得無法理解。企業(yè)面臨的挑戰(zhàn)是尋找新的海量固定內(nèi)容數(shù)據(jù)存儲(chǔ)方式和新的存儲(chǔ)管理方式，保證數(shù)據(jù)的查詢效率不受時(shí)間和容量的影響，使企業(yè)存放的海量固定內(nèi)容信息能真正變成企業(yè)的財(cái)富；同時(shí)，要保證海量固定內(nèi)容存儲(chǔ)系統(tǒng)有好的擴(kuò)展性、兼容性(新擴(kuò)展的存儲(chǔ)設(shè)備能容易兼容企業(yè)舊的存儲(chǔ)設(shè)備)，以及低成本和高性價(jià)比。對(duì)不斷增長的海量固定內(nèi)容信息進(jìn)行高效的存儲(chǔ)、管理、檢索，這無疑對(duì)網(wǎng)絡(luò)存儲(chǔ)技術(shù)提出了全新的更高的要求，主要包括以下幾個(gè)方面1)存取性能要保證在任何時(shí)間、任何地點(diǎn)都能對(duì)存儲(chǔ)的固定內(nèi)容信息快速、便捷地讀取。2)可靠性和完整性要確保對(duì)信息內(nèi)容不得有任何修改，且所存放的任何固定內(nèi)容信息都必須符合一定的規(guī)范或標(biāo)準(zhǔn)。 3)位置無關(guān)性對(duì)任何固定內(nèi)容信息的訪問與其物理地址/邏輯地址無關(guān)，僅與其內(nèi)容有關(guān)，即根據(jù)內(nèi)容定位信息的存放位置。4)持久性和可擴(kuò)展性系統(tǒng)要保證用戶的持續(xù)訪問，并且整個(gè)存儲(chǔ)系統(tǒng)具有較強(qiáng)的可擴(kuò)展能力，可以非常容易地升級(jí)至PB級(jí)容量，必須保證可避免因設(shè)備更新等產(chǎn)生的數(shù)據(jù)遺失問題。5)可管理性和可維護(hù)性必須滿足商業(yè)應(yīng)用的連續(xù)性和災(zāi)難恢復(fù)需求，需要最小化的存儲(chǔ)管理，自動(dòng)化程度盡可能地高。傳統(tǒng)基于文件系統(tǒng)或塊的存儲(chǔ)系統(tǒng)，包括DAS (直連存儲(chǔ))、NAS (附網(wǎng)存儲(chǔ))和SAN(存儲(chǔ)局域網(wǎng))，不具有固定內(nèi)容存儲(chǔ)需要的特性這些系統(tǒng)是追求高性能而不是高度永久性，以文件或塊為單位分布數(shù)據(jù)而不是使空間效率最大化，為了讀寫數(shù)據(jù)而不是永久地保存數(shù)據(jù)，并且只提供了 一些安全措施，而沒有堅(jiān)實(shí)的抗毀性。[0005]固定內(nèi)容數(shù)據(jù)文件有明顯的特點(diǎn)(1) 一經(jīng)創(chuàng)建不再修改，或很少修改，必須被長期保存，以便今后檢索；(2)隨時(shí)時(shí)間和容量不斷增長，需要存儲(chǔ)系統(tǒng)有極好的可擴(kuò)展性； (3)固定內(nèi)容存儲(chǔ)系統(tǒng)中需要具有區(qū)別于傳統(tǒng)文件系統(tǒng)或塊存儲(chǔ)系統(tǒng)的特性存儲(chǔ)成本低， 不可改變的特性(一次寫入、多次讀取)，高可靠性(校驗(yàn)和檢測(cè)、消除復(fù)制)；以及區(qū)別于其他存儲(chǔ)系統(tǒng)的特性比磁帶系統(tǒng)更小的延遲，通用的接口，高效的搜索能力(尤其是在PB 級(jí)海量存儲(chǔ)系統(tǒng)中)，幾十年后或幾百年后對(duì)資料的讀取可以像現(xiàn)在對(duì)本地或分布式系統(tǒng)的讀取一樣方便。

實(shí)用新型內(nèi)容本實(shí)用新型的目的在于提供一種固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)。固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)，其特征在于，包括第一 IP交換機(jī)和第二 IP交換機(jī)；連接于所述第一 IP交換機(jī)和第二 IP交換機(jī)之間的元數(shù)據(jù)服務(wù)器和應(yīng)用服務(wù)器；與所述第二 IP交換機(jī)相連的計(jì)算機(jī)系統(tǒng)接口設(shè)備以及網(wǎng)絡(luò)附屬存儲(chǔ)設(shè)備；一與第二 IP交換機(jī)相連的網(wǎng)絡(luò)附屬存儲(chǔ)接頭；分別與所述網(wǎng)絡(luò)存儲(chǔ)設(shè)備接頭相連的第一光纖通道交換機(jī)和第二光纖通道交換機(jī)；與第一光纖通道交換機(jī)相連的光纖通道獨(dú)立冗余磁盤陣列；與第二光纖通道交換機(jī)相連的光纖通斷轉(zhuǎn)接橋或計(jì)算機(jī)系統(tǒng)接口轉(zhuǎn)接橋；與所述光纖通斷轉(zhuǎn)接橋或計(jì)算機(jī)系統(tǒng)接口轉(zhuǎn)接橋相連的磁帶庫或光盤庫。在本實(shí)用新型固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)中，多協(xié)議文件系統(tǒng)通過對(duì)管理系統(tǒng)所使用的元數(shù)據(jù)進(jìn)行擴(kuò)展，收集用戶應(yīng)用信息，為用戶提供統(tǒng)一、方便、快捷的存儲(chǔ)訪問接口以及合理的數(shù)據(jù)存儲(chǔ)方案。另一方面，多協(xié)議文件系統(tǒng)與內(nèi)容管理和元數(shù)據(jù)管理結(jié)合能夠自動(dòng)地發(fā)現(xiàn)海量存儲(chǔ)系統(tǒng)中存儲(chǔ)設(shè)備的種類和各種可利用資源，自主地對(duì)這些存儲(chǔ)設(shè)備和資源進(jìn)行有效的統(tǒng)一管理和優(yōu)化，并且根據(jù)應(yīng)用的不同和應(yīng)用的具體需求，安排與應(yīng)用相適應(yīng)的存儲(chǔ)設(shè)備種類、性能以及可靠性和可用性等級(jí)等，為用戶提供較優(yōu)的存儲(chǔ)服務(wù)。

圖1是本實(shí)用新型固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)的硬件結(jié)構(gòu)圖。圖2是本實(shí)用新型固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)的軟件結(jié)構(gòu)圖。
具體實(shí)施方式
以下結(jié)合附圖和實(shí)施例對(duì)本實(shí)用新型作進(jìn)一步說明。請(qǐng)參考圖1、圖2，本實(shí)用新型固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)包括應(yīng)用服務(wù)器20、 元數(shù)據(jù)服務(wù)器30以及存儲(chǔ)設(shè)備40。應(yīng)用服務(wù)器20包括多協(xié)議文件系統(tǒng)21，多協(xié)議文件系統(tǒng)21為客戶端10不同協(xié)議用戶(即客戶1，客戶2…客戶η)提供訪問接口，又為具有不同存儲(chǔ)技術(shù)的存儲(chǔ)設(shè)備40提供接口。元數(shù)據(jù)服務(wù)器30包括元數(shù)據(jù)管理系統(tǒng)31，元數(shù)據(jù)管理系統(tǒng)31通過多協(xié)議文件系統(tǒng)21為用戶提供元數(shù)據(jù)編輯界面以及為系統(tǒng)管理人員提供內(nèi)容管理和元數(shù)據(jù)管理。存儲(chǔ)設(shè)備40包括固定內(nèi)容數(shù)據(jù)存儲(chǔ)層41，用于存放固定內(nèi)容數(shù)據(jù)和對(duì)應(yīng)的存儲(chǔ)元數(shù)據(jù)。[0016]元數(shù)據(jù)管理系統(tǒng)31包括元數(shù)據(jù)管理層311，其存放系統(tǒng)元數(shù)據(jù)和內(nèi)容元數(shù)據(jù)。所述系統(tǒng)元數(shù)據(jù)包括文件與目錄的組織關(guān)系、及文件名與文件身份證(ID)的映射關(guān)系，所述內(nèi)容元數(shù)據(jù)包括外部特征元數(shù)據(jù)和內(nèi)部特征元數(shù)據(jù)。數(shù)字對(duì)象由內(nèi)容、結(jié)構(gòu)和背景三部分組成，按照作用的不同，可將這三要素劃分為兩類一是為滿足數(shù)字對(duì)象形成目的而生成的信息，以內(nèi)容為代表，如某文件的文字內(nèi)容，包括關(guān)鍵詞和摘要等，即所述內(nèi)部特征；二是為了有序管理數(shù)字對(duì)象而產(chǎn)生的信息，包括結(jié)構(gòu)和背景，其中結(jié)構(gòu)反映了數(shù)字對(duì)象各部分的組織情況，如文件格式等，背景則反映了文件形成過程，如某文件創(chuàng)建時(shí)間、創(chuàng)建人、修改人、修改時(shí)間等，即所述外部特征。固定內(nèi)容數(shù)據(jù)存儲(chǔ)層41包括存儲(chǔ)元數(shù)據(jù)和數(shù)據(jù)塊，所述存儲(chǔ)元數(shù)據(jù)包括對(duì)存儲(chǔ)數(shù)字對(duì)象資源的描述信息，所述數(shù)據(jù)塊是指固定文件的組成單位(一個(gè)文件可按大小分一個(gè)或多個(gè)數(shù)據(jù)塊)?？蛻舳伺c應(yīng)用服務(wù)器之間的訪問模式包括瀏覽器/服務(wù)器(browser/server， 簡稱B/S)訪問模式、網(wǎng)絡(luò)小型計(jì)算機(jī)系統(tǒng)接口( internet Small Computer System Interface,簡稱iSCSI)訪問模式和客服端/服務(wù)器(Client/Server，簡稱C/S)訪問模式。存儲(chǔ)設(shè)備40包括附網(wǎng)存儲(chǔ)(Network Attached Storage，簡稱NAQ設(shè)備45、 iSCSI設(shè)備46、光纖通道獨(dú)立磁盤冗余陣列(Fibre Channel Redundant Array of Inexpensive Disks，簡稱FC RAID)設(shè)備47和磁帶庫/光盤庫48。FC RAID設(shè)備47與FC交換機(jī)50相連，磁帶庫/光盤庫48通過FC/SCSI轉(zhuǎn)接橋 51與FC交換機(jī)50相連，F(xiàn)C交換機(jī)50通過附網(wǎng)存儲(chǔ)頭(NAS Head)52與IP交換機(jī)2相連。 客戶端10的用戶與IP交換機(jī)1相連。用戶上傳固定內(nèi)容文件資源流程如下1、用戶在客戶端10以TOB方式或以C/S方式，向圖1中的應(yīng)用服務(wù)器20提出文件上傳請(qǐng)求(該用戶必須已在系統(tǒng)中注冊(cè)并有相應(yīng)的訪問權(quán)限)；2、用戶請(qǐng)求通過認(rèn)證后，應(yīng)用服務(wù)器20將該請(qǐng)求轉(zhuǎn)給圖1中的元數(shù)據(jù)服務(wù)器30， 元數(shù)據(jù)服務(wù)器30與客戶端10的用戶建立連接；3、連接建立后，用戶在客戶端10通過元數(shù)據(jù)服務(wù)器30中的元數(shù)據(jù)管理系統(tǒng)31編輯上傳文件的元數(shù)據(jù)，即提取元數(shù)據(jù)；4、元數(shù)據(jù)編輯完成后，用戶將元數(shù)據(jù)和數(shù)據(jù)文件一起上傳并暫存在應(yīng)用服務(wù)器20 的緩存子系統(tǒng)中；5、經(jīng)過系統(tǒng)管理員檢查和審核固定內(nèi)容文件合格后，將元數(shù)據(jù)存放在元數(shù)據(jù)服務(wù)器30中，將文件資料歸類存儲(chǔ)在圖1中的存儲(chǔ)設(shè)備40中。用戶下載或?yàn)g覽固定內(nèi)容文件資源流程如下1、用戶以WEB方式或以C/S方式登陸圖1中的應(yīng)用服務(wù)器20 ；2、通過身份認(rèn)證后，可以三種方式瀏覽或下載數(shù)據(jù)資源①通過提供文件ID方式；②通過提供文件名或關(guān)鍵詞等檢索方式；③按主題/子主題或年月時(shí)間等檢索方式。3、如果用戶以文件ID方式訪問固定內(nèi)容文件時(shí)，圖1中的元數(shù)據(jù)服務(wù)器30中的元數(shù)據(jù)管理系統(tǒng)31根據(jù)文件ID查找系統(tǒng)中的ID鏈表，根據(jù)該鏈表可以找到ID所對(duì)應(yīng)數(shù)據(jù)在存儲(chǔ)設(shè)備40上的物理地址信息并建立與該存儲(chǔ)設(shè)備40的聯(lián)系；該存儲(chǔ)設(shè)備40根據(jù)文件ID自動(dòng)查找存儲(chǔ)元數(shù)據(jù)，即找該文件存在設(shè)備中的磁盤和磁盤中的位置；存儲(chǔ)設(shè)備40通過圖1中的應(yīng)用服務(wù)器20將該文件呈現(xiàn)在客戶端10。4、如果用戶通過文件名、關(guān)鍵詞、時(shí)間、作者以及主題/子主題等檢索或聯(lián)合檢索時(shí)，系統(tǒng)通過元數(shù)據(jù)服務(wù)器30中的元數(shù)據(jù)管理系統(tǒng)31中集成的檢索模塊在內(nèi)容元數(shù)據(jù)庫中檢索符合條件的記錄并提取每條記錄中的文件ID，以及根據(jù)固定內(nèi)容文件ID號(hào)查找系統(tǒng)中的ID鏈表，并根據(jù)該鏈表可以找到ID所對(duì)應(yīng)數(shù)據(jù)在存儲(chǔ)設(shè)備40上的物理地址信息并建立與該存儲(chǔ)設(shè)備的聯(lián)系。5、用戶按主題/子主題或年月時(shí)間等檢索時(shí)，與4類似，不同是檢索的是一批文件。對(duì)于本領(lǐng)域的技術(shù)人員來說，可根據(jù)以上描述的技術(shù)方案以及構(gòu)思，做出其它各種相應(yīng)的改變以及變形，而所有的這些改變以及變形都應(yīng)該屬于本實(shí)用新型權(quán)利要求的保護(hù)范圍之內(nèi)。
權(quán)利要求1.固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)，其特征在于，包括第一IP交換機(jī)和第二IP交換機(jī)；連接于所述第一 IP交換機(jī)和第二 IP交換機(jī)之間的元數(shù)據(jù)服務(wù)器和應(yīng)用服務(wù)器；與所述第二 IP交換機(jī)相連的計(jì)算機(jī)系統(tǒng)接口設(shè)備以及網(wǎng)絡(luò)附屬存儲(chǔ)設(shè)備；一與第二 IP交換機(jī)相連的網(wǎng)絡(luò)附屬存儲(chǔ)接頭；分別與所述網(wǎng)絡(luò)存儲(chǔ)設(shè)備接頭相連的第一光纖通道交換機(jī)和第二光纖通道交換機(jī)；與第一光纖通道交換機(jī)相連的光纖通道獨(dú)立冗余磁盤陣列；與第二光纖通道交換機(jī)相連的光纖通斷轉(zhuǎn)接橋或計(jì)算機(jī)系統(tǒng)接口轉(zhuǎn)接橋；與所述光纖通斷轉(zhuǎn)接橋或計(jì)算機(jī)系統(tǒng)接口轉(zhuǎn)接橋相連的磁帶庫或光盤庫。
專利摘要一種固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)，包括第一IP交換機(jī)和第二IP交換機(jī)；連接于所述第一IP交換機(jī)和第二IP交換機(jī)之間的元數(shù)據(jù)服務(wù)器和應(yīng)用服務(wù)器；與所述第二IP交換機(jī)相連的計(jì)算機(jī)系統(tǒng)接口設(shè)備以及網(wǎng)絡(luò)附屬存儲(chǔ)設(shè)備；一與第二IP交換機(jī)相連的網(wǎng)絡(luò)附屬存儲(chǔ)接頭；分別與所述網(wǎng)絡(luò)存儲(chǔ)設(shè)備接頭相連的第一光纖通道交換機(jī)和第二光纖通道交換機(jī)；與第一光纖通道交換機(jī)相連的光纖通道獨(dú)立冗余磁盤陣列；與第二光纖通道交換機(jī)相連的光纖通斷轉(zhuǎn)接橋或計(jì)算機(jī)系統(tǒng)接口轉(zhuǎn)接橋；與所述光纖通斷轉(zhuǎn)接橋或計(jì)算機(jī)系統(tǒng)接口轉(zhuǎn)接橋相連的磁帶庫或光盤庫。本實(shí)用新型為用戶提供統(tǒng)一、方便、快捷的存儲(chǔ)訪問接口以及合理的數(shù)據(jù)存儲(chǔ)方案。
文檔編號(hào)G06F17/30GK202025315SQ201020644060
公開日2011年11月2日 申請(qǐng)日期2010年12月7日 優(yōu)先權(quán)日2010年12月7日
發(fā)明者韓德志 申請(qǐng)人:廣州中長康達(dá)信息技術(shù)有限公司, 韓德志