基本介紹
- 中文名：元數據標準
- 定義：關於數據倉庫的數據
- 優點：自描述檔案
- 列舉：數據結構，數據部署
- 參考標準：ISO/IEC 11179, GB/T 18391
簡介,存儲的信息,優點,屬性,意義,列舉,開發套用,開發套用框架,套用環境,結構,編碼語言,製作方式,互操作性,幾點建議,參考標準,
簡介
元數據（Meta Data）是關於數據倉庫的數據，指在數據倉庫建設過程中所產生的有關數據源定義，目標定義，轉換規則等相關的關鍵數據。同時元數據還包含關於數據含義的商業信息，所有這些信息都應當妥善保存，並很好地管理。為數據倉庫的發展和使用提供方便。
元數據是一種二進制信息，用以對存儲在公共語言運行庫可移植執行檔 (PE) 檔案或存儲在記憶體中的程式進行描述。將您的代碼編譯為 PE 檔案時，便會將元數據插入到該檔案的一部分中，而將代碼轉換為 Microsoft 中間語言 (MSIL) 並將其插入到該檔案的另一部分中。在模組或程式集中定義和引用的每個類型和成員都將在元數據中進行說明。當執行代碼時，運行庫將元數據載入到記憶體中，並引用它來發現有關代碼的類、成員、繼承等信息。
元數據標準
元數據標準元數據以非特定語言的方式描述在代碼中定義的每一類型和成員。
存儲的信息
程式集的說明。
標識（名稱、版本、區域性、公鑰）。
導出的類型。
該程式集所依賴的其他程式集。
運行所需的安全許可權。
類型的說明。
名稱、可見性、基類和實現的接口。
成員（方法、欄位、屬性、事件、嵌套的類型）。
屬性。
修飾類型和成員的其他說明性元素。
優點
對於一種更簡單的編程模型來說，元數據是關鍵，該模型不再需要接口定義語言 (IDL) 檔案、頭檔案或任何外部組件引用方法。元數據允許 .NET 語言自動以非特定語言的方式對其自身進行描述，而這是開發人員和用戶都無法看見的。另外，通過使用屬性，可以對元數據進行擴展。元數據具有以下主要優點：
自描述檔案。
公共語言運行庫模組和程式集是自描述的。模組的元數據包含與另一個模組進行互動所需的全部信息。元數據自動提供 COM 中 IDL 的功能，允許將一個檔案同時用於定義和實現。運行庫模組和程式集甚至不需要向作業系統註冊。結果，運行庫使用的說明始終反映編譯檔案中的實際代碼，從而提高應用程式的可靠性。
語言互用性和更簡單的基於組件的設計。
元數據提供所有必需的有關已編譯代碼的信息，以供您從用不同語言編寫的 PE 檔案中繼承類。您可以創建用任何託管語言（任何面向公共語言運行庫的語言）編寫的任何類的實例，而不用擔心顯式封送處理或使用自定義的互用代碼。
屬性
.NET Framework 允許您在編譯檔案中聲明特定種類的元數據（稱為屬性）。在整個 .NET Framework 中到處都可以發現屬性的存在，屬性用於更精確地控制運行時您的程式如何工作。另外，您可以通過用戶定義的自定義屬性向 .NET Framework 檔案發出您自己的自定義元數據。有關更多信息，請參見利用屬性擴展元數據。
意義
說到元數據的意義，可以從其套用目的來談的。雖然做數據倉庫言必稱元數據，必稱技術、業務元數據，但其到底用於何處？離開了目標去談元數據，就發現元數據包含太多的東西，因為他是描述數據的數據嘛。
還是那客戶關係系統來比喻，這個系統維護客戶信息當然是有目的的，是要用這些信息進行一些自動的流程處理、去挖掘一些客戶潛在的價值、做好客戶服務。當然沒有必要去維護客戶的生命特徵信息，諸如指紋、犯罪史等，這些信息跟客戶關係管理的目標關係不大。元數據也是如此，你可以將所以數據的結構、大小、什麼時間創建、什麼時間消亡、被那些人使用等等，這些信息可以延伸得太廣，如果不管目標，而試圖去建一個非常完美的元數據管理體系，這是一種絕對的"自上而下"做法，必敗無疑。
列舉
基於套用，可以將元數據分成以下的若干種。
數據結構：數據集的名稱、關係、欄位、約束等；
數據部署：數據集的物理位置；
數據流：數據集之間的流程依賴關係（非參照依賴），包括數據集到另一個數據集的規則；
質量度量：數據集上可以計算的度量；
度量邏輯關係：數據集度量之間的邏輯運算關係；
ETL過程：過程運行的順序，並行、串列；
數據集快照：一個時間點上，數據在所有數據集上的分布情況；
報表語義層：報表指標的規則、過濾條件物理名稱和業務名稱的對應；
數據訪問日誌：哪些數據何時被何人訪問；
質量稽核日誌：何時、何度量被稽核，其結果；
數據裝載日誌：哪些數據何時被何人裝載；
開發套用
開發套用框架
元數據的基本意義
Metadata（元數據）是“關於數據的數據”；
元數據為各種形態的數位化信息單元和資源集合提供規範、普遍的描述方法和檢索工具；
元數據為分布的、由多種數位化資源有機構成的信息體系（如數字圖書館）提供整合的工具與紐帶。
離開元數據的數字圖書館將是一盤散沙，將無法提供有效的檢索和處理。
套用環境
Metadata的套用目的
（1）確認和檢索（Discovery Identification），主要致力於如何幫助人們檢索和確認所需要的資源，數據元素往往限於作者、標題、主題、位置等簡單信息，Dublin Core是其典型代表。
（4）資源保護與長期保存（Preservation and Archiving），支持對資源進行長期保存，數據元素除對資源進行描述和確認外，往往包括詳細的格式信息、製作信息、保護條件、轉換方式（Migration Methods）、保存責任等內容。
Metadata在不同領域的套用 根據不同領域的數據特點和套用需要，90年代以來，許多Metadata格式在各個不同領域出現
例如：
網路資源：Dublin Core、IAFA Template、CDF、Web Collections
文獻資料：MARC（with 856 Field），Dublic Core
人文科學：TEI Header
社會科學數據集：ICPSR SGML Codebook
博物館與藝術作品：CIMI、CDWA、RLG REACH Element Set、VRA Core
政府信息：GILS
地理空間信息：FGDC/CSDGM
數字圖像：MOA2 metadata、CDL metadata、Open Archives Format、VRA Core、NISO/CLIR/RLG Technical Metadata for Images
檔案庫與資源集合：EAD
技術報告：RFC 1807
連續圖像：MPEG-7
Metadata格式的套用程度
不同領域的Metadata處於不同的標準化階段：
在網路資源描述方面，Dublin Core經過多年國際性努力，已經成為一個廣為接受和套用的事實標準；
在政府信息方面，由於美國政府大力推動和有關法律、標準的實行，GILS已經成為政府信息描述標準，並在世界若干國家得到相當程度的套用，與此類似的還有地理空間信息處理的FGDC/CSDGM；
但在某些領域，由於技術的迅速發展變化，仍然存在多個方案競爭，典型的是數字圖像的Metadata，提出的許多標準都處於實驗和完善的階段。
Metadata格式“標準化”程度問題
Metadata開發套用經驗表明，很難有一個統一的Metadata格式來滿足所有領域的數據描述需要；即使在同一個領域，也可能為了不同目的而需要不同的但可相互轉換的Metadata格式。
同時，統一的集中計畫式的Metadata格式標準也不適合Internet環境，不利於充分利用市場機制和各方面力量。
但在同一領域，應爭取“標準化”，在不同領域，應妥善解決不同格式的互操作問題。
結構
總體結構定義方式 一個Metadata格式由多層次的結構予以定義：
（1）內容結構（Content Structure），對該Metadata的構成元素及其定義標準進行描述。
（2）句法結構（Syntax Structure），定義Metadata結構以及如何描述這種結構。
（3）語義結構（Semantic Structure），定義Metadata元素的具體描述方法。
內容結構
這些數據元素很可能依據一定標準來選取，因此元數據內容結構中需要對此進行說明，例如MARC記錄所依據的ISBD，EAD所參照的ISAD（G），ICPSR所依據的ICPSR Data Preparation Manual。
句法結構
句法結構定義格式結構及其描述方式，例如元素的分區分段組織、元素選取使用規則、元素描述方法（例如Dublin Core採用ISO/IEC 11179標準）、元素結構描述方法（例如MARC記錄結構、SGML結構、XML結構）、結構語句描述語言（例如EBNF Notation）等。
語義結構 語義結構定義元素的具體描述方法，例如 描述元素時所採用的標準、最佳實踐（Best Practices）或自定義的描述要求（Instructions）。
有些元數據格式本身定義了語義結構，而另外一些則由具體採用單位規定語義結構，例如Dublin Core建議日期元素採用ISO 8601、資源類型採用Dublin Core Types、數據格式可採用MIME、識別號採用URL或DOI或ISBN；
又如OhioLink在使用VRA Core時要求主題元素使用A&AT、TGM和TGN，人名元素用ULAN。
編碼語言
元數據編碼語言（Metadata Encoding Languages）指對元數據元素和結構進行定義和描述的具體語法和語義規則，常稱為定義描述語言（DDL）。
製作方式
在元數據發展初期人們常使用自定義的記錄語言（例如MARC）或資料庫記錄結構（如ROADS等），但隨著元數據格式的增多和互操作的要求，人們開始採用一些標準化的DDL來描述元數據，例如SGML和XML，其中以XML最有潛力。
元數據製作方式
（1）專門編制模組（例如對MARC、GILS、FGDC等）
（2）數據處理時自動編制（例如對Dublin Core等）
（3）數據物理處理時自動編制（例如數字圖像掃描時的某些元數據參數）
互操作性
由於不同的領域（甚至同一領域）往往存在多個元數據格式，當在用不同元數據格式描述的資源體系之間進行檢索、資源描述和資源利用時，就存在元數據的互操作性問題（Interoperability）：
多個不同元數據格式的釋讀、轉換和由多個元數據格式描述的數位化信息資源體系之間的透明檢索。
元數據格式映射
利用特定轉換程式對不同元數據元格式進行轉換，稱為元數據映射（Metadata Mapping/Crosswalking）。
目前已有大量的轉換程式存在，供若干流行元數據格式之間的轉化，例如
Dublin Core與USMARC； Dublin Core與EAD
Dublin Core與GILS； GILS與MARC TEI
Header與MARC FGDC與MARC
也可利用一種中介格式對同一格式框架下的多種元數據格式進行轉換，例如UNIverse項目利用GRS格式進行各種MARC格式和其它記錄格式的轉換。格式映射轉換準確、轉換效率較高。不過，這種方法在面對多種元數據格式並存的開放式環境中的套用效率明顯受到限制。
標準描述框架
解決元數據互操作性的另一種思路是建立一個標準的資源描述框架，用這個框架來描述所有元數據格式，那么只要一個系統能夠解析這個標準描述框架，就能解讀相應的Metadata格式． 實際上，XML和RDF從不同角度起著類似的作用。
RDF定義了由Resources、Properties和Statements等三種對象組成的基本模型，其中Resources和Properties關係類似於E-R模型，而Statements則對該關係進行具體描述。
進一步地，RDF定義了標準Schema，規定了聲明資源類型、聲明相關屬性及其語義的機制，以及定義屬性與其它資源間關係的方法。另外，RDF還規定了利用XML Namespace方法調用已有定義規範的機制，
數字對象方式
建立包含元數據及其轉換機制的數字對象可能從另一個角度解決元數據互操作性問題。
Cornell/FEDORA項目提出由核心（Structural Kernel）和功能傳播層（Disseminator Layer）組成的複合數字對象。
功能傳播層，主功能傳播器（PrimitiveDisseminator）支持有關解構核心數據類型和對核心數據讀取的服務功能，還可有內容類型傳播器（Content-Type Disseminators），它們可內嵌元數據格式轉換機制。
例如，在一個數字對象的核心中存有MARC格式的元數據，在功能傳播層裝載有請求Dublin Core格式及其轉換服務的內容類型傳播器。當數字對象使用者要求讀取以Dublin Core表示的元數據時，相應的內容類型傳播器將通過網路請求存儲有Dublin Core及其轉換服務程式的數字對象，然後將被請求數字對象中的MARC形式元數據轉換為Dublin Core形式，在輸出給用戶。
幾點建議
跟蹤元數據發展、積極參與制定元數據標準、加快元數據套用、注意國際接軌。
加快研究有效利用元數據進行檢索（包括異構系統透明檢索）、相關性學習、個性化處理等的機制。
加快研究元數據與數字對象和數位化資源體系有機整合的途徑與方法。
參考標準
國際標準（ISO）
Information technology-Metadata registries (MDR)
Part 1: Framework (ISO/IEC 11179-1 2004);
Part 2:Classification (ISO/IEC 11179-22005);
Part 3: Registry metamodel and basic attributes(ISO/IEC 11179-32013);
Part 4: Formulation of data definitions(ISO/IEC 11179-42004);
Part 5: Naming and identification principles(ISO/IEC 11179-52005);
Part 6: Registration(ISO/IEC 11179-62004).
國家標準（GB）
信息技術 元數據註冊系統(MDR) （與上述國際標準對應一致，共6部分，標準號為：GB/T 18391.1-2009~GB/T 18391.6-2009）。
GB/T 18391.1-2009：信息技術 元數據註冊系統(MDR) 第1部分：框架
GB/T 18391.2-2009：信息技術 元數據註冊系統(MDR) 第2部分：分類
GB/T 18391.3-2009：信息技術 元數據註冊系統(MDR) 第3部分：註冊系統元模型與基本屬性
GB/T 18391.4-2009：信息技術 元數據註冊系統(MDR) 第4部分：數據定義的形成
GB/T 18391.5-2009：信息技術 元數據註冊系統(MDR) 第5部分：命名和標識原則
GB/T 18391.6-2009：信息技術 元數據註冊系統(MDR) 第6部分：註冊
