元數(shù)據(jù)管理方案

1、元數(shù)據(jù)管理方案1.1 元數(shù)據(jù)抽取為了簡化元數(shù)據(jù)生成工作，系統(tǒng)提供自動生成元數(shù)據(jù)的功能，即元數(shù)據(jù)抽取。通過元數(shù)據(jù)自動抽取，用戶可以方便、快捷地獲得大量的元數(shù)據(jù)信息。1.1.1 抽取的對象元數(shù)據(jù)抽取主要針對的對象有以下幾種：l已有目錄：已建業(yè)務應用系統(tǒng)中現(xiàn)有的目錄資源。l數(shù)據(jù)庫：各種數(shù)據(jù)庫資源，包括關(guān)系型數(shù)據(jù)庫、XML數(shù)據(jù)庫等。l格式化電子文件：電子文件，例如Word、PDF、XLS等文件。1.1.2 元數(shù)據(jù)抽取的流程元數(shù)據(jù)抽取的流程有4個主要步驟，分別為：l數(shù)據(jù)源信息獲?。航鉀Q要從哪個數(shù)據(jù)源獲得元數(shù)據(jù)的問題。l內(nèi)容/結(jié)構(gòu)分析：解決要從數(shù)據(jù)源中獲得哪些元數(shù)據(jù)的問題。l元數(shù)據(jù)提?。航鉀Q如何從數(shù)據(jù)源中

2、獲取元數(shù)據(jù)的問題。l存儲入庫：解決元數(shù)據(jù)存儲的問題。1.1.3 電子文檔的元數(shù)據(jù)抽取對于電子文檔，首先各部門的文檔格式不盡相同，另外它們的安全級別也各不相同，同時由于信息化建設水平的不一致，有的部門文檔分散在各處，有的部門文檔是集中存放的，甚至已經(jīng)建立了完善的電子系統(tǒng)進行管理。針對以上狀況，對于電子文檔的元數(shù)據(jù)抽取需要進行以下的抽取流程：l 整理歸檔對于分散在各處的電子文檔(紙質(zhì)文檔需要先進行電子化處理)，必須由專人進行統(tǒng)一整理，根據(jù)公開共享的前提進行集中，這種集中可以是物理上集中的，也可以是邏輯上集中的。但要滿足以下原則，第一根據(jù)安全級別，便于外界訪問；第二便于文檔的增量發(fā)布；第三便于采集工

3、具的自動化采集編目。各部門只有在文檔完全整理歸檔的情況下，進行自動化采集才是切實可行的。在整理歸檔的時候，各部門根據(jù)各自情況進行歸檔，沒有必要千篇一律，也沒有必要制定繁瑣和呆板的規(guī)則，只要能夠滿足以上的原則即可。l 根據(jù)安全級別，建立相應的訪問機制由于受到安全級別的限制，所以對于需要共享的數(shù)據(jù)要進行安全方面的限制，限制的手段可以有：用戶名/密碼、數(shù)字證書、物理隔斷等等，根據(jù)實際情況建立安全訪問機制，做到重要信息不泄露，不丟失。l 編目處理現(xiàn)階段，主流格式的電子文檔，主要包含：word、excel、ppt、pdf等。對主流格式的電子文檔，要提供自動采集工具進行編目處理。采集的范圍主要是文檔的標題

4、和內(nèi)容，對于其它的元數(shù)據(jù)內(nèi)容，要提供手工配置的方式進行輔助。另外，在工具的采集效率上，要提高增量文檔發(fā)布后的采集效率。對于格式特殊、內(nèi)容有加密算法的文檔，是很難通過抓取工具進行采集的，這些文檔主要通過手工編目的方式來處理。對于存在管理庫的文檔，就需要對數(shù)據(jù)庫來進行編目采集，詳見數(shù)據(jù)庫元數(shù)據(jù)抽取部分。l 保存元數(shù)據(jù)采集后的數(shù)據(jù)要放到數(shù)據(jù)庫或者保存到硬盤上，另外要根據(jù)目錄體系標準，把數(shù)據(jù)分解為元數(shù)據(jù)，然后進行存儲1.1.4 數(shù)據(jù)庫元數(shù)據(jù)抽取數(shù)據(jù)中心需要抽取的數(shù)據(jù)庫類型主要為Sql server，首先利用ETL工具從源數(shù)據(jù)庫中將所需數(shù)據(jù)抽取至中心數(shù)據(jù)庫基礎(chǔ)業(yè)務庫中，在利用元數(shù)據(jù)著錄工具對抽取出來的數(shù)

5、據(jù)進行元數(shù)據(jù)著錄。1.2 元數(shù)據(jù)著錄根據(jù)元數(shù)據(jù)標準定義的元數(shù)據(jù)項，提供著錄界面，針對每一個著錄項的特點，提供文本框、列表框、復選框等錄入形式。l 元數(shù)據(jù)內(nèi)容錄入元數(shù)據(jù)內(nèi)容錄入用于元數(shù)據(jù)內(nèi)容的錄入處理，根據(jù)元數(shù)據(jù)庫對各類信息元數(shù)據(jù)的定義，幫助和引導錄入人員建立符合要求的信息資源元數(shù)據(jù)。元數(shù)據(jù)內(nèi)容錄入動態(tài)地完成編輯元數(shù)據(jù)所需的處理，包括元素內(nèi)容編輯組件動態(tài)生成、元素關(guān)系自動關(guān)聯(lián)和元素值域檢查等。其中編輯組件動態(tài)生成功能根據(jù)元數(shù)據(jù)標準定義的元素數(shù)據(jù)類型和取值方式動態(tài)地確定界面編輯組件的形式，使界面極具友好性；元素關(guān)系自動關(guān)聯(lián)保證了元素之間的約束關(guān)系能夠被編輯器自動的處理，減少了由于編輯人員對標準的理

6、解錯誤而產(chǎn)生元數(shù)據(jù)結(jié)構(gòu)錯誤的可能；元素值域檢查可對用戶輸入的數(shù)據(jù)的有效性進行判斷，以確保元數(shù)據(jù)信息內(nèi)容的正確性。l 標準邏輯分析元數(shù)據(jù)采集系統(tǒng)對描述元素的處理不依賴于特定的元數(shù)據(jù)標準，也就是說采集系統(tǒng)對元數(shù)據(jù)標準邏輯的分析和處理是獨立于標準本身的。采集系統(tǒng)的標準邏輯分析功能通過元數(shù)據(jù)標準的XML描述獲得元素之間的制約關(guān)系、值域等處理邏輯。因此編輯器可以很好的適應標準的不斷更新和升級。l 元數(shù)據(jù)完整性檢查為保證元數(shù)據(jù)的完整性，編輯器提供了元數(shù)據(jù)完整性檢查功能。利用該功能，編輯器可以在輸出文檔之前對各個描述元素的組織關(guān)系、元素內(nèi)容的完整性加以檢查，發(fā)現(xiàn)編輯過程中可能遺留的問題，并提示用戶加以修正。

7、通過完整性檢查的元數(shù)據(jù)將嚴格復合相應元數(shù)據(jù)內(nèi)容標準所做的規(guī)定。l 聯(lián)機幫助處理用于完成系統(tǒng)聯(lián)機幫助的查詢、顯示操作。1.3 元數(shù)據(jù)審核元數(shù)據(jù)審核主要用于元數(shù)據(jù)報送到數(shù)據(jù)中心接收數(shù)據(jù)庫但還沒正式發(fā)布到發(fā)布數(shù)據(jù)庫的元數(shù)據(jù)。元數(shù)據(jù)有效性審核分為自動審核與手動審核兩個部分，數(shù)據(jù)在接受報送系統(tǒng)報送數(shù)據(jù)時會啟動自動審核系統(tǒng)對數(shù)據(jù)進行初步的有效性審核，主要以過濾數(shù)據(jù)結(jié)構(gòu)性錯誤為主，例如缺少字段、類型錯誤、編碼缺失或不可識別字符編碼等。如果自動檢查發(fā)現(xiàn)錯誤，會將錯誤數(shù)據(jù)放入問題數(shù)據(jù)欄，以便數(shù)據(jù)管理員進行人工審核，如果人工審核認為數(shù)據(jù)沒有問題，可強制確認有效，系統(tǒng)會自動提交勘誤報告給系統(tǒng)管員，作為自動審核功能改

8、進的依據(jù)，如果數(shù)據(jù)管理員也認為數(shù)據(jù)有誤，可以將元數(shù)據(jù)退回給報送系統(tǒng)，由報送系統(tǒng)轉(zhuǎn)交給報送部門從新報送。手工審核設計包括確認無誤、退回重報、打印錯誤清單、直接更新元數(shù)據(jù)內(nèi)容、打印元數(shù)據(jù)內(nèi)容等功能，為了安全起見，更新元數(shù)據(jù)功能會記錄詳細的操作審計日志。1.4 元數(shù)據(jù)發(fā)布如果接受數(shù)據(jù)庫中的元數(shù)據(jù)已經(jīng)通過審核（手動或自動），元數(shù)據(jù)將自動進入待發(fā)布流程，可以從元數(shù)據(jù)管理平臺的待發(fā)布數(shù)據(jù)欄中看到所有等待發(fā)布的數(shù)據(jù)，數(shù)據(jù)管理可以在此頁面中看到所有等待發(fā)布的數(shù)據(jù)，并作最后確認，系統(tǒng)在等到發(fā)布確認消息后會成批的將所有報送上來的原數(shù)據(jù)從接受數(shù)據(jù)庫中轉(zhuǎn)移到發(fā)布數(shù)據(jù)庫中，完成正式的發(fā)布過程，同時發(fā)送消息給報送單位，提

9、示發(fā)布成功。元數(shù)據(jù)發(fā)布審核設計包括確認發(fā)布、確認無效、打印發(fā)布清單、直接更新元數(shù)據(jù)內(nèi)容、打印元數(shù)據(jù)內(nèi)容等功能，為了安全起見，更新元數(shù)據(jù)功能會記錄詳細的操作審計日志。1.5 元數(shù)據(jù)入庫當元數(shù)據(jù)著錄完成并通過語法檢查后，可通過目錄服務上傳到元數(shù)據(jù)庫中。l 元數(shù)據(jù)檢查元數(shù)據(jù)檢查是指檢查員對操作員生成的元數(shù)據(jù)進行合法性檢查。主要檢查信息資源元數(shù)據(jù)的內(nèi)容、格式符合標準規(guī)范的要求，信息資源元數(shù)據(jù)內(nèi)容必須符合元數(shù)據(jù)規(guī)范的要求。形式化審核工作由工作系統(tǒng)自動完成。其他非形式化的審核工作，例如資源分類是否準確、主題詞提取是否準確等等，需要由檢查員完成。未通過審核要求的政務信息資源元數(shù)據(jù)需要操作員重新修訂后提交。l

10、 元數(shù)據(jù)入庫元數(shù)據(jù)通過檢查后上傳到元數(shù)據(jù)庫中存儲。1.6 元數(shù)據(jù)維護元數(shù)據(jù)維護主要用于維護、查看已發(fā)布的元數(shù)據(jù)，由于元數(shù)據(jù)發(fā)布需要經(jīng)過嚴格的審核流程，一旦審核通過，原則上元數(shù)據(jù)的更改需要重新走元數(shù)據(jù)申報流程，包括已發(fā)布元數(shù)據(jù)的實效申請和新元數(shù)據(jù)的添加申請，而不允許對已發(fā)布的元數(shù)據(jù)進行直接修改。但為了應急，特設立了此功能，但此功能只能開放給核心管理用戶使用，為了安全起見，元數(shù)據(jù)維護功能的所有操作都記錄到操作審計日之中去。普通管理員只有查看、檢索元數(shù)據(jù)的權(quán)限。而管理員除了具有查看、檢索元數(shù)據(jù)權(quán)限外，可以使用新增目錄的功能，將元數(shù)據(jù)字典中定義的目錄結(jié)構(gòu)添加到現(xiàn)有的目錄中去，并且可以修改、更新、刪除元

11、數(shù)據(jù)。元數(shù)據(jù)維護設計包括根據(jù)元數(shù)據(jù)字典創(chuàng)建目錄、打印現(xiàn)有目錄結(jié)構(gòu)、根據(jù)目錄發(fā)現(xiàn)、查找元數(shù)據(jù)、查看元數(shù)據(jù)內(nèi)容等功能，核心管理層還可以查詢、修改、刪除、移動已經(jīng)發(fā)布的元數(shù)據(jù)內(nèi)容。1.6.1 元數(shù)據(jù)查詢系統(tǒng)提供基于元數(shù)據(jù)項的查詢功能，用戶在輸入需要查詢的信息后，系統(tǒng)自動搜索數(shù)據(jù)集的元數(shù)據(jù)信息，返回相關(guān)的查詢結(jié)果。1.6.2 元數(shù)據(jù)瀏覽在數(shù)據(jù)集查詢界面，系統(tǒng)以列表的形式展現(xiàn)重點元數(shù)據(jù)信息內(nèi)容，若用戶需要查看元數(shù)據(jù)詳細信息，可以點擊查看元數(shù)據(jù)屬性按鈕，瀏覽詳細的元數(shù)據(jù)信息。注：圖中數(shù)據(jù)為示例數(shù)據(jù)，僅為更好的提供具體展現(xiàn)設計使用，不代表現(xiàn)實情況。1.6.3 元數(shù)據(jù)更新元數(shù)據(jù)更新采用兩種模式，一種是基于單個數(shù)據(jù)集的元數(shù)據(jù)信息修改模式。用戶可以點擊修改按鈕對該數(shù)據(jù)集的元數(shù)據(jù)信息進行修改，修改完成后提交審核。另一種模式是元數(shù)據(jù)庫批量更新。1.6.4 元數(shù)據(jù)刪除系統(tǒng)提供元數(shù)據(jù)刪除的功能。沒有通過審核