專利名稱：固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)的制作方法
技術(shù)領(lǐng)域：
本實用新型涉及一種固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)。
背景技術(shù)：
固定內(nèi)容(Fixed Content)就是自創(chuàng)建以后不再更改并具有長時間保存價值的數(shù)據(jù)對象，如辦公office文檔、E-mail、電視新聞、醫(yī)療圖片、天文圖像、音頻、視頻，電信、 銀行和電業(yè)等部門的數(shù)據(jù)庫交易記錄，以及無線傳感網(wǎng)絡(luò)經(jīng)過加工處理后的信息等。固定內(nèi)容包含了與企業(yè)業(yè)務(wù)相關(guān)的內(nèi)容，可為企業(yè)提供有價值的信息，固也稱之為參考數(shù)據(jù) (Reference Data)。IDC在《2008年存儲市場的發(fā)展現(xiàn)狀及趨勢分析報告》指出，從2006年到2011年5年當中，數(shù)據(jù)的產(chǎn)生到我們對數(shù)據(jù)進行保存以及維護或者是備份、歸檔一系列的環(huán)節(jié)下來整個數(shù)據(jù)量增長了 10倍。在數(shù)據(jù)的增長當中，非結(jié)構(gòu)化或半結(jié)構(gòu)化的數(shù)據(jù)(固定內(nèi)容數(shù)據(jù))越來越多，會占用我們整個存儲容量的90%以上。固定內(nèi)容是非結(jié)構(gòu)化或半結(jié)構(gòu)化數(shù)據(jù)，企業(yè)存儲的固定內(nèi)容信息隨時間增長變得十分巨大，這些海量的固定信息是企業(yè)的重要財富。例如，醫(yī)生可從醫(yī)院海量醫(yī)療圖像信息和診斷病歷中檢索到所要的案例，或挖掘診斷某種疾病的規(guī)律；電信或銀行等部門能從海量數(shù)據(jù)庫交易記錄中挖掘客戶流失或增加客戶量的規(guī)律等；在教育系統(tǒng)中，學(xué)校可以從本科、碩士和博士的論文，以及各種學(xué)習(xí)文檔中挖掘有用的教學(xué)和科研信息；天文工作者可以從海量的天文圖像信息找到新的發(fā)現(xiàn)。但采用傳統(tǒng)的存儲方式從海量固定內(nèi)容數(shù)據(jù)中找到需要的內(nèi)容非常困難，并且其中大部分內(nèi)容隨時間的增長甚至變得無法理解。企業(yè)面臨的挑戰(zhàn)是尋找新的海量固定內(nèi)容數(shù)據(jù)存儲方式和新的存儲管理方式，保證數(shù)據(jù)的查詢效率不受時間和容量的影響，使企業(yè)存放的海量固定內(nèi)容信息能真正變成企業(yè)的財富；同時，要保證海量固定內(nèi)容存儲系統(tǒng)有好的擴展性、兼容性(新擴展的存儲設(shè)備能容易兼容企業(yè)舊的存儲設(shè)備)，以及低成本和高性價比。對不斷增長的海量固定內(nèi)容信息進行高效的存儲、管理、檢索，這無疑對網(wǎng)絡(luò)存儲技術(shù)提出了全新的更高的要求，主要包括以下幾個方面1)存取性能要保證在任何時間、任何地點都能對存儲的固定內(nèi)容信息快速、便捷地讀取。2)可靠性和完整性要確保對信息內(nèi)容不得有任何修改，且所存放的任何固定內(nèi)容信息都必須符合一定的規(guī)范或標準。 3)位置無關(guān)性對任何固定內(nèi)容信息的訪問與其物理地址/邏輯地址無關(guān)，僅與其內(nèi)容有關(guān)，即根據(jù)內(nèi)容定位信息的存放位置。4)持久性和可擴展性系統(tǒng)要保證用戶的持續(xù)訪問，并且整個存儲系統(tǒng)具有較強的可擴展能力，可以非常容易地升級至PB級容量，必須保證可避免因設(shè)備更新等產(chǎn)生的數(shù)據(jù)遺失問題。5)可管理性和可維護性必須滿足商業(yè)應(yīng)用的連續(xù)性和災(zāi)難恢復(fù)需求，需要最小化的存儲管理，自動化程度盡可能地高。傳統(tǒng)基于文件系統(tǒng)或塊的存儲系統(tǒng)，包括DAS (直連存儲)、NAS (附網(wǎng)存儲)和SAN(存儲局域網(wǎng))，不具有固定內(nèi)容存儲需要的特性這些系統(tǒng)是追求高性能而不是高度永久性，以文件或塊為單位分布數(shù)據(jù)而不是使空間效率最大化，為了讀寫數(shù)據(jù)而不是永久地保存數(shù)據(jù)，并且只提供了 一些安全措施，而沒有堅實的抗毀性。[0005]固定內(nèi)容數(shù)據(jù)文件有明顯的特點(1) 一經(jīng)創(chuàng)建不再修改，或很少修改，必須被長期保存，以便今后檢索；(2)隨時時間和容量不斷增長，需要存儲系統(tǒng)有極好的可擴展性； (3)固定內(nèi)容存儲系統(tǒng)中需要具有區(qū)別于傳統(tǒng)文件系統(tǒng)或塊存儲系統(tǒng)的特性存儲成本低， 不可改變的特性(一次寫入、多次讀取)，高可靠性(校驗和檢測、消除復(fù)制)；以及區(qū)別于其他存儲系統(tǒng)的特性比磁帶系統(tǒng)更小的延遲，通用的接口，高效的搜索能力(尤其是在PB 級海量存儲系統(tǒng)中)，幾十年后或幾百年后對資料的讀取可以像現(xiàn)在對本地或分布式系統(tǒng)的讀取一樣方便。

實用新型內(nèi)容本實用新型的目的在于提供一種固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)。固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)，其特征在于，包括第一 IP交換機和第二 IP交換機；連接于所述第一 IP交換機和第二 IP交換機之間的元數(shù)據(jù)服務(wù)器和應(yīng)用服務(wù)器；與所述第二 IP交換機相連的計算機系統(tǒng)接口設(shè)備以及網(wǎng)絡(luò)附屬存儲設(shè)備；一與第二 IP交換機相連的網(wǎng)絡(luò)附屬存儲接頭；分別與所述網(wǎng)絡(luò)存儲設(shè)備接頭相連的第一光纖通道交換機和第二光纖通道交換機；與第一光纖通道交換機相連的光纖通道獨立冗余磁盤陣列；與第二光纖通道交換機相連的光纖通斷轉(zhuǎn)接橋或計算機系統(tǒng)接口轉(zhuǎn)接橋；與所述光纖通斷轉(zhuǎn)接橋或計算機系統(tǒng)接口轉(zhuǎn)接橋相連的磁帶庫或光盤庫。在本實用新型固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)中，多協(xié)議文件系統(tǒng)通過對管理系統(tǒng)所使用的元數(shù)據(jù)進行擴展，收集用戶應(yīng)用信息，為用戶提供統(tǒng)一、方便、快捷的存儲訪問接口以及合理的數(shù)據(jù)存儲方案。另一方面，多協(xié)議文件系統(tǒng)與內(nèi)容管理和元數(shù)據(jù)管理結(jié)合能夠自動地發(fā)現(xiàn)海量存儲系統(tǒng)中存儲設(shè)備的種類和各種可利用資源，自主地對這些存儲設(shè)備和資源進行有效的統(tǒng)一管理和優(yōu)化，并且根據(jù)應(yīng)用的不同和應(yīng)用的具體需求，安排與應(yīng)用相適應(yīng)的存儲設(shè)備種類、性能以及可靠性和可用性等級等，為用戶提供較優(yōu)的存儲服務(wù)。

圖1是本實用新型固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)的硬件結(jié)構(gòu)圖。圖2是本實用新型固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)的軟件結(jié)構(gòu)圖。
具體實施方式
以下結(jié)合附圖和實施例對本實用新型作進一步說明。請參考圖1、圖2，本實用新型固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)包括應(yīng)用服務(wù)器20、 元數(shù)據(jù)服務(wù)器30以及存儲設(shè)備40。應(yīng)用服務(wù)器20包括多協(xié)議文件系統(tǒng)21，多協(xié)議文件系統(tǒng)21為客戶端10不同協(xié)議用戶(即客戶1，客戶2…客戶η)提供訪問接口，又為具有不同存儲技術(shù)的存儲設(shè)備40提供接口。元數(shù)據(jù)服務(wù)器30包括元數(shù)據(jù)管理系統(tǒng)31，元數(shù)據(jù)管理系統(tǒng)31通過多協(xié)議文件系統(tǒng)21為用戶提供元數(shù)據(jù)編輯界面以及為系統(tǒng)管理人員提供內(nèi)容管理和元數(shù)據(jù)管理。存儲設(shè)備40包括固定內(nèi)容數(shù)據(jù)存儲層41，用于存放固定內(nèi)容數(shù)據(jù)和對應(yīng)的存儲元數(shù)據(jù)。[0016]元數(shù)據(jù)管理系統(tǒng)31包括元數(shù)據(jù)管理層311，其存放系統(tǒng)元數(shù)據(jù)和內(nèi)容元數(shù)據(jù)。所述系統(tǒng)元數(shù)據(jù)包括文件與目錄的組織關(guān)系、及文件名與文件身份證(ID)的映射關(guān)系，所述內(nèi)容元數(shù)據(jù)包括外部特征元數(shù)據(jù)和內(nèi)部特征元數(shù)據(jù)。數(shù)字對象由內(nèi)容、結(jié)構(gòu)和背景三部分組成，按照作用的不同，可將這三要素劃分為兩類一是為滿足數(shù)字對象形成目的而生成的信息，以內(nèi)容為代表，如某文件的文字內(nèi)容，包括關(guān)鍵詞和摘要等，即所述內(nèi)部特征；二是為了有序管理數(shù)字對象而產(chǎn)生的信息，包括結(jié)構(gòu)和背景，其中結(jié)構(gòu)反映了數(shù)字對象各部分的組織情況，如文件格式等，背景則反映了文件形成過程，如某文件創(chuàng)建時間、創(chuàng)建人、修改人、修改時間等，即所述外部特征。固定內(nèi)容數(shù)據(jù)存儲層41包括存儲元數(shù)據(jù)和數(shù)據(jù)塊，所述存儲元數(shù)據(jù)包括對存儲數(shù)字對象資源的描述信息，所述數(shù)據(jù)塊是指固定文件的組成單位(一個文件可按大小分一個或多個數(shù)據(jù)塊)?？蛻舳伺c應(yīng)用服務(wù)器之間的訪問模式包括瀏覽器/服務(wù)器(browser/server， 簡稱B/S)訪問模式、網(wǎng)絡(luò)小型計算機系統(tǒng)接口( internet Small Computer System Interface,簡稱iSCSI)訪問模式和客服端/服務(wù)器(Client/Server，簡稱C/S)訪問模式。存儲設(shè)備40包括附網(wǎng)存儲(Network Attached Storage，簡稱NAQ設(shè)備45、 iSCSI設(shè)備46、光纖通道獨立磁盤冗余陣列(Fibre Channel Redundant Array of Inexpensive Disks，簡稱FC RAID)設(shè)備47和磁帶庫/光盤庫48。FC RAID設(shè)備47與FC交換機50相連，磁帶庫/光盤庫48通過FC/SCSI轉(zhuǎn)接橋 51與FC交換機50相連，F(xiàn)C交換機50通過附網(wǎng)存儲頭(NAS Head)52與IP交換機2相連。 客戶端10的用戶與IP交換機1相連。用戶上傳固定內(nèi)容文件資源流程如下1、用戶在客戶端10以TOB方式或以C/S方式，向圖1中的應(yīng)用服務(wù)器20提出文件上傳請求(該用戶必須已在系統(tǒng)中注冊并有相應(yīng)的訪問權(quán)限)；2、用戶請求通過認證后，應(yīng)用服務(wù)器20將該請求轉(zhuǎn)給圖1中的元數(shù)據(jù)服務(wù)器30， 元數(shù)據(jù)服務(wù)器30與客戶端10的用戶建立連接；3、連接建立后，用戶在客戶端10通過元數(shù)據(jù)服務(wù)器30中的元數(shù)據(jù)管理系統(tǒng)31編輯上傳文件的元數(shù)據(jù)，即提取元數(shù)據(jù)；4、元數(shù)據(jù)編輯完成后，用戶將元數(shù)據(jù)和數(shù)據(jù)文件一起上傳并暫存在應(yīng)用服務(wù)器20 的緩存子系統(tǒng)中；5、經(jīng)過系統(tǒng)管理員檢查和審核固定內(nèi)容文件合格后，將元數(shù)據(jù)存放在元數(shù)據(jù)服務(wù)器30中，將文件資料歸類存儲在圖1中的存儲設(shè)備40中。用戶下載或瀏覽固定內(nèi)容文件資源流程如下1、用戶以WEB方式或以C/S方式登陸圖1中的應(yīng)用服務(wù)器20 ；2、通過身份認證后，可以三種方式瀏覽或下載數(shù)據(jù)資源①通過提供文件ID方式；②通過提供文件名或關(guān)鍵詞等檢索方式；③按主題/子主題或年月時間等檢索方式。3、如果用戶以文件ID方式訪問固定內(nèi)容文件時，圖1中的元數(shù)據(jù)服務(wù)器30中的元數(shù)據(jù)管理系統(tǒng)31根據(jù)文件ID查找系統(tǒng)中的ID鏈表，根據(jù)該鏈表可以找到ID所對應(yīng)數(shù)據(jù)在存儲設(shè)備40上的物理地址信息并建立與該存儲設(shè)備40的聯(lián)系；該存儲設(shè)備40根據(jù)文件ID自動查找存儲元數(shù)據(jù)，即找該文件存在設(shè)備中的磁盤和磁盤中的位置；存儲設(shè)備40通過圖1中的應(yīng)用服務(wù)器20將該文件呈現(xiàn)在客戶端10。4、如果用戶通過文件名、關(guān)鍵詞、時間、作者以及主題/子主題等檢索或聯(lián)合檢索時，系統(tǒng)通過元數(shù)據(jù)服務(wù)器30中的元數(shù)據(jù)管理系統(tǒng)31中集成的檢索模塊在內(nèi)容元數(shù)據(jù)庫中檢索符合條件的記錄并提取每條記錄中的文件ID，以及根據(jù)固定內(nèi)容文件ID號查找系統(tǒng)中的ID鏈表，并根據(jù)該鏈表可以找到ID所對應(yīng)數(shù)據(jù)在存儲設(shè)備40上的物理地址信息并建立與該存儲設(shè)備的聯(lián)系。5、用戶按主題/子主題或年月時間等檢索時，與4類似，不同是檢索的是一批文件。對于本領(lǐng)域的技術(shù)人員來說，可根據(jù)以上描述的技術(shù)方案以及構(gòu)思，做出其它各種相應(yīng)的改變以及變形，而所有的這些改變以及變形都應(yīng)該屬于本實用新型權(quán)利要求的保護范圍之內(nèi)。
權(quán)利要求1.固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)，其特征在于，包括第一IP交換機和第二IP交換機；連接于所述第一 IP交換機和第二 IP交換機之間的元數(shù)據(jù)服務(wù)器和應(yīng)用服務(wù)器；與所述第二 IP交換機相連的計算機系統(tǒng)接口設(shè)備以及網(wǎng)絡(luò)附屬存儲設(shè)備；一與第二 IP交換機相連的網(wǎng)絡(luò)附屬存儲接頭；分別與所述網(wǎng)絡(luò)存儲設(shè)備接頭相連的第一光纖通道交換機和第二光纖通道交換機；與第一光纖通道交換機相連的光纖通道獨立冗余磁盤陣列；與第二光纖通道交換機相連的光纖通斷轉(zhuǎn)接橋或計算機系統(tǒng)接口轉(zhuǎn)接橋；與所述光纖通斷轉(zhuǎn)接橋或計算機系統(tǒng)接口轉(zhuǎn)接橋相連的磁帶庫或光盤庫。
專利摘要一種固定內(nèi)容的數(shù)據(jù)資源管理系統(tǒng)，包括第一IP交換機和第二IP交換機；連接于所述第一IP交換機和第二IP交換機之間的元數(shù)據(jù)服務(wù)器和應(yīng)用服務(wù)器；與所述第二IP交換機相連的計算機系統(tǒng)接口設(shè)備以及網(wǎng)絡(luò)附屬存儲設(shè)備；一與第二IP交換機相連的網(wǎng)絡(luò)附屬存儲接頭；分別與所述網(wǎng)絡(luò)存儲設(shè)備接頭相連的第一光纖通道交換機和第二光纖通道交換機；與第一光纖通道交換機相連的光纖通道獨立冗余磁盤陣列；與第二光纖通道交換機相連的光纖通斷轉(zhuǎn)接橋或計算機系統(tǒng)接口轉(zhuǎn)接橋；與所述光纖通斷轉(zhuǎn)接橋或計算機系統(tǒng)接口轉(zhuǎn)接橋相連的磁帶庫或光盤庫。本實用新型為用戶提供統(tǒng)一、方便、快捷的存儲訪問接口以及合理的數(shù)據(jù)存儲方案。
文檔編號G06F17/30GK202025315SQ201020644060
公開日2011年11月2日 申請日期2010年12月7日 優(yōu)先權(quán)日2010年12月7日
發(fā)明者韓德志 申請人:廣州中長康達信息技術(shù)有限公司, 韓德志