導航:首頁 > 數據處理 > 項目中的元數據有哪些

項目中的元數據有哪些

發布時間:2022-05-16 15:15:07

1. 什麼是元數據管理及其作用

元數據管理定義如下:

1、元數據管理包括業務詞彙表的發展,數據元素和實體的定義,業務規則和演算法以及數據特徵。

2、最基礎的管理是管理業務元數據的收集、組織和維持。

3、對技術型元數據的應用對主數據管理和數據治理項目的成功至關重要。

元數據管理作用:

1、元數據是「所有系統、文檔和流程中包含的所有數據的語境

2、如果沒有元數據,組織IT系統中收集和存儲的所有數據都會失去意義,也就沒有業務價值。

3、元數據管理是一項和主數據管理、數據治理一樣重要的功能,因為元數據管理是每一個這些准則的基礎組件。

4、組織部署了數據治理項目,但沒有解決元數據管理問題,仍然獲得了成功,那是因為很多數據管家執行的活動和任務在聚焦元數據和元數據的管理流程。

2. 元數據的標准

1、數字圖書館資源組織框架
2. 元數據開發應用框架
元數據的基本意義 Metadata(元數據)是「關於數據的數據」;
元數據為各種形態的數字化信息單元和資源集合提供規范、普遍的描述方法和檢索工具;
元數據為分布的、由多種數字化資源有機構成的信息體系(如數字圖書館)提供整合的工具與紐帶。
離開元數據的數字圖書館將是一盤散沙,將無法提供有效的檢索和處理。
3. 元數據應用環境
3.1 Metadata的應用目的
(1)確認和檢索(Discovery andentification),主要致力於如何幫助人們檢索和確認所需要的資源,數據元素往往限於作者、標題、主題、位置等簡單信息,Dublin Core是其典型代表。
(2)著錄描述(Cataloging),用於對數據單元進行詳細、全面的著錄描述,數據元素囊括內容、載體、位置與獲取方式、製作與利用方法、甚至相關數據單元方面等,數據元素數量往往較多,MARC、GILS和FGDC/CSDGM是這類Metadata的典型代表。
(3)資源管理(Resource Administration),支持資源的存儲和使用管理,數據元素除比較全面的著錄描述信息外,還往往包括權利管理(Rights/Privacy Management)、電子簽名(Digital Signature)、資源評鑒(Seal of Approval/Rating)、使用管理(Access Management)、支付審計(Payment and Accounting)等方面的信息。
(4)資源保護與長期保存(Preservation and Archiving),支持對資源進行長期保存,數據元素除對資源進行描述和確認外,往往包括詳細的格式信息、製作信息、保護條件、轉換方式(Migration Methods)、保存責任等內容。
3.2 Metadata在不同領域的應用 根據不同領域的數據特點和應用需要,90年代以來,許多Metadata格式在各個不同領域出現
例如:
網路資源:Dublin Core、IAFA Template、CDF、Web Collections
文獻資料:MARC(with 856 Field),Dublic Core
人文科學:TEI Header
社會科學數據集:ICPSR SGML Codebook
博物館與藝術作品:CIMI、CDWA、RLG REACH Element Set、VRA Core
政府信息:GILS
地理空間信息:FGDC/CSDGM
數字圖像:MOA2 metadata、CDL metadata、Open Archives Format、VRA Core、NISO/CLIR/RLG Technical Metadata for Images
檔案庫與資源集合:EAD
技術報告:RFC 1807
連續圖像:MPEG-7
3.3 Metadata格式的應用程度
不同領域的Metadata處於不同的標准化階段:
在網路資源描述方面,Dublin Core經過多年國際性努力,已經成為一個廣為接受和應用的事實標准;
在政府信息方面,由於美國政府大力推動和有關法律、標準的實行,GILS已經成為政府信息描述標准,並在世界若干國家得到相當程度的應用,與此類似的還有地理空間信息處理的FGDC/CSDGM;
但在某些領域,由於技術的迅速發展變化,仍然存在多個方案競爭,典型的是數字圖像的Metadata,提出的許多標准都處於實驗和完善的階段。
3.4 Metadata格式「標准化」程度問題
Metadata開發應用經驗表明,很難有一個統一的Metadata格式來滿足所有領域的數據描述需要;即使在同一個領域,也可能為了不同目的而需要不同的但可相互轉換的Metadata格式。
同時,統一的集中計劃式的Metadata格式標准也不適合Internet環境,不利於充分利用市場機制和各方面力量。
但在同一領域,應爭取「標准化」,在不同領域,應妥善解決不同格式的互操作問題。
4. 元數據結構
4.1 總體結構定義方式 一個Metadata格式由多層次的結構予以定義:
(1)內容結構(Content Structure),對該Metadata的構成元素及其定義標准進行描述。
(2)句法結構(Syntax Structure),定義Metadata結構以及如何描述這種結構。
(3)語義結構(Semantic Structure),定義Metadata元素的具體描述方法。
4.2 內容結構
內容結構定義Metadata的構成元素,可包括: 描述性元素、技術性元素、管理性元素、結構性元素(例如與編碼語言、Namespace、數據單元等的鏈接)。
這些數據元素很可能依據一定標准來選取,因此元數據內容結構中需要對此進行說明,例如MARC記錄所依據的ISBD,EAD所參照的ISAD(G),ICPSR所依據的ICPSR Data Preparation Manual。
4.3 句法結構
句法結構定義格式結構及其描述方式,例如元素的分區分段組織、元素選取使用規則、元素描述方法(例如Dublin Core採用ISO/IEC 11179標准)、元素結構描述方法(例如MARC記錄結構、SGML結構、XML結構)、結構語句描述語言(例如EBNF Notation)等。
有時,句法結構需要指出元數據是否與所描述的數據對象捆綁在一起、或作為單獨數據存在但以一定形式與數據對象鏈接,還可能描述與定義標准、DTD結構和Namespace等的鏈接方式。
4.4 語義結構 語義結構定義元素的具體描述方法,例如 描述元素時所採用的標准、最佳實踐(Best Practices)或自定義的描述要求(Instructions)。
有些元數據格式本身定義了語義結構,而另外一些則由具體採用單位規定語義結構,例如Dublin Core建議日期元素採用ISO 8601、資源類型採用Dublin Core Types、數據格式可採用MIME、識別號採用URL或DOI或ISBN;
又如OhioLink在使用VRA Core時要求主題元素使用A&AT、TGM和TGN,人名元素用ULAN。
5. 元數據編碼語言與製作方式
5.1 元數據編碼語言
元數據編碼語言(Metadata Encoding Languages)指對元數據元素和結構進行定義和描述的具體語法和語義規則,常稱為定義描述語言(DDL)。
在元數據發展初期人們常使用自定義的記錄語言(例如MARC)或資料庫記錄結構(如ROADS等),但隨著元數據格式的增多和互操作的要求,人們開始採用一些標准化的DDL來描述元數據,例如SGML和XML,其中以XML最有潛力。
5.2 元數據製作方式
(1)專門編制模塊(例如對MARC、GILS、FGDC等)
(2)數據處理時自動編制(例如對Dublin Core等)
(3)數據物理處理時自動編制(例如數字圖像掃描時的某些元數據參數)
(4)共享元數據(例如OCLC/CORC、IMESH
6. 元數據互操作性
6.1 元數據互操作性問題
由於不同的領域(甚至同一領域)往往存在多個元數據格式,當在用不同元數據格式描述的資源體系之間進行檢索、資源描述和資源利用時,就存在元數據的互操作性問題(Interoperability):
多個不同元數據格式的釋讀、轉換和由多個元數據格式描述的數字化信息資源體系之間的透明檢索。
6.2 元數據格式映射
利用特定轉換程序對不同元數據元格式進行轉換,稱為元數據映射(Metadata Mapping/Crosswalking)。
已有大量的轉換程序存在,供若幹流行元數據格式之間的轉化,例如
Dublin Core與USMARC; Dublin Core與EAD
Dublin Core與GILS;GILS與MARC TEI
Header與MARC FGDC與MARC
也可利用一種中介格式對同一格式框架下的多種元數據格式進行轉換,例如UNIverse項目利用GRS格式進行各種MARC格式和其它記錄格式的轉換。格式映射轉換准確、轉換效率較高。不過,這種方法在面對多種元數據格式並存的開放式環境中的應用效率明顯受到限制。
6.3 標准描述框架
解決元數據互操作性的另一種思路是建立一個標準的資源描述框架,用這個框架來描述所有元數據格式,那麼只要一個系統能夠解析這個標准描述框架,就能解讀相應的Metadata格式. 實際上,XML和RDF從不同角度起著類似的作用。
XML通過其標準的DTD定義方式,允許所有能夠解讀XML語句的系統辨識用XML_DTD定義的Metadata格式,從而解決對不同格式的釋讀問題。
RDF定義了由Resources、Properties和Statements等三種對象組成的基本模型,其中Resources和Properties關系類似於E-R模型,而Statements則對該關系進行具體描述。
RDF通過這個抽象的數據模型為定義和使用元數據建立一個框架,元數據元素可看成其描述的資源的屬性。
進一步地,RDF定義了標准Schema,規定了聲明資源類型、聲明相關屬性及其語義的機制,以及定義屬性與其它資源間關系的方法。另外,RDF還規定了利用XML Namespace方法調用已有定義規范的機制。
6.4數字對象方式
建立包含元數據及其轉換機制的數字對象可能從另一個角度解決元數據互操作性問題。
Cornell/FEDORA項目提出由內核(Structural Kernel)和功能傳播層(Disseminator Layer)組成的復合數字對象。
內核里,可以容納以比特流形式存在的文獻內容、描述該文獻的元數據、以及對這個文獻及元數據進行存取控制的有關數據。
功能傳播層,主功能傳播器(PrimitiveDisseminator)支持有關解構內核數據類型和對內核數據讀取的服務功能,還可有內容類型傳播器(Content-Type Disseminators),它們可內嵌元數據格式轉換機制。
例如,在一個數字對象的內核中存有MARC格式的元數據,在功能傳播層裝載有請求Dublin Core格式及其轉換服務的內容類型傳播器。當數字對象使用者要求讀取以Dublin Core表示的元數據時,相應的內容類型傳播器將通過網路請求存儲有Dublin Core及其轉換服務程序的數字對象,然後將被請求數字對象中的MARC形式元數據轉換為Dublin Core形式,在輸出給用戶。
7. 幾點建議
跟蹤元數據發展、積極參與制定元數據標准、加快元數據應用、注意國際接軌。
加快研究有效利用元數據進行檢索(包括異構系統透明檢索)、相關性學習、個性化處理等的機制。
加快研究元數據與數字對象和數字化資源體系有機整合的途徑與方法。
推進研究利用元數據進行基於知識的數據組織和知識發現。

3. 什麼是元數據

元數據(Metadata),又稱中介數據、中繼數據,為描述數據的數據(data about data)。

元數據作用是:

1、描述數據屬性(property)的信息,用來支持如指示存儲位置、歷史數據、資源查找、文件記錄等功能。

2、元數據算是一種電子式目錄,為了達到編制目錄的目的,必須在描述並收藏數據的內容或特色,進而達成協助數據檢索的目的。

元數據的應用舉例:

1、數據結構:數據集的名稱、關系、欄位、約束等;

2、數據部署:數據集的物理位置;

3、數據流:數據集之間的流程依賴關系(非參照依賴),包括數據集到另一個數據集的規則;

4、質量度量:數據集上可以計算的度量;

5、度量邏輯關系:數據集度量之間的邏輯運算關系;

6、ETL過程:過程運行的順序,並行、串列;

7、數據集快照:一個時間點上,數據在所有數據集上的分布情況。

(3)項目中的元數據有哪些擴展閱讀:

元數據的優點:

1、自描述:元數據自動提供 COM 中 IDL 的功能,允許將一個文件同時用於定義和實現。運行庫模塊和程序集甚至不需要向操作系統注冊。結果,運行庫使用的說明始終反映編譯文件中的實際代碼,從而提高應用程序的可靠性。

2、設計:元數據提供所有必需的有關已編譯代碼的信息,以供用戶從用不同語言編寫的 PE 文件中繼承類。用戶可以創建用任何託管語言(任何面向公共語言運行庫的語言)編寫的任何類的實例,而不用擔心顯式封送處理或使用自定義的互用代碼。

4. 十六、什麼是元數據

謝海洋 王素娟 元數據,英文拼寫為Metadata,目前已被廣泛應用於各種信息資源的管理領域中。在檔案界,最早使用「元數據」的是美國的電子文件管理專家戴維?比爾曼,他在20世紀90年代初發表的有關電子文件管理方面的論文中首先使用了元數據這一術語。 元數據的概念目前在檔案界還沒有一個統一的定論,目前比較有代表性的描述有: 1.元數據是「關於數據的數據(Data about Data)」,其中,後一個Data是指被描述的信息資源,前一個Data則是指為理解該信息資源而存儲的有關信息,即元數據。這是元數據目前公認最為經典、通俗和簡潔的定義。 2.國際檔案理事會《電子文件管理指南》(1997)認為「元數據是關於文件的背景信息和結構的數據,是有關電子文件的技術性信息。」 3.《澳大利亞聯邦機構電子文件保管元數據標准》(1999)認為「文件保管元數據是關於電子文件背景的描述信息。」 4.英國國家檔案館《電子文件管理指南》(1999)認為「元數據是關於文件和文件集合的背景及其相互關系的結構化描述和編目數據。」 5.馮惠玲主編的《電子文件管理教程》認為元數據是「由電子文件系統自動記錄的關於文件形成時間、地點、人員、活動、文件系統、結構及內容方面的具體數據。」 6.「元數據可以理解為用來描述資源的屬性與特徵的信息。」-劉家真《電子文件管理理論與實踐》,科學出版社2003年版。 7.「元數據是對數據對象規范描述所形成的數據集合,通過計算機可讀的開放語言來標記元數據,就能在系統間發現、交換、轉換和理解相應的數字對象,支持系統間互操作。」-張曉林《開放元數據機制:理念與原則》,《中國圖書館學報》2003年3期。 以上描述雖然表述各不相同,但我們可以發現一個共同點,即元數據主要是動態地描述電子文檔各種特徵的信息數據集合,並且它能為分散的、由多種數字化資源有機構成的檔案信息體系提供整合的工具與紐帶。隨著研究的深入,我們對元數據的認識在逐步深化。 檔案工作人員為便於理解,可以簡單把電子文檔的元數據視為兩方面:一是「著錄信息或著錄數據」。其中,「元數據元素就是著錄項目,元數據格式就是著錄項目之間關系的結構化表示,元數據編碼就是著錄信息的編制。」(劉越南《對電子文件管理元數據的再認識》,《檔案學通訊》2005年2期);二是電子文檔的內容、背景和結構等方面的信息。 國外學者將元數據喻為電子文件管理系統中的「血液」,足見元數據在數字檔案館電子文件管理中發揮著舉足輕重的作用。元數據的作用主要可以概括為以下幾方面: 1.元數據能協助數字檔案館構建信息檢索機制。元數據具有動態跟蹤功能,能夠即時動態地獲取電子文件管理的各項信息。在數字檔案館的海量信息庫中,藉助元數據,可以快速發現並獲取特定的信息單元。 2.元數據能維護信息的識別與讀取。電子文件所攜帶的元數據信息可以完整地記錄電子文件的原始狀態,能夠系統地映射出電子文件的信息內容、背景和結構等;還能夠映射出電子文件的生成環境和行政管理環境。只有在獲取數據對象的同時也獲取這些元數據信息,被檢索到的數據單元才是可理解的、可讀的。 3.元數據能保障電子文件的真實性與憑證性。元數據系統能夠跟蹤記錄電子文件從產生那一刻起的載體、設備及所用技術的變遷史以及使用干預該文件的整個歷史過程,即不論載體、設備、技術如何更新換代,不論使用者、使用人數的多少都全部作為歷史數據保存下來,記錄備案。這些為數字信息單元真實性和憑證性提供了重要的佐證。

5. 什麼是元數據(指數據中心建設而言)舉個例子說明一下。

元數據的英文名稱是「Metadata",它是「關於數據的數據」在地理空間信息中用於描述地理數據集的內容、質量、表示方式、空間參考、管理方式以及數據集的其他特徵,它是實現地理空間信息共享的核心標准之一。目前,國際上對空間元數據標准內容進行研究的組織主要有三個,分別是歐洲標准化委員會(CEN/TC287)、美國聯邦地理數據委員會(FGDC)和國際標准化組織地理信息/地球信息技術委員會(ISO/TC211)。空間元數據標准內容分兩個層次。第一層是目錄信息,主要用於對數據集信息進行宏觀描述,它適合在數字地球的國家級空間信息交換中心或區域以及全球范圍內管理和查詢空間信息時使用。第二層是詳細信息,用來詳細或全面描述地理空間信息的空間元數據標准內容,是數據集生產者在提供空間數據集時必須要提供的信息。

元數據主要有下列幾個方面的作用:

(1)用來組織和管理空間信息,並挖掘空間信息資源,這正是數字地球的特點和優點所在。通過它可以在廣域網或網際網路上准確地識別、定位和訪問空間信息。

(2)幫助數據使用者查詢所需空間信息。比如,它可以按照不同的地理區間、指定的語言以及具體的時間段來查找空間信息資源。

(3)組織和維護一個機構對數據的投資。

(4)用來建立空間信息的數據目錄和數據交換中心。通過數據目錄和數據交換中心等提供的空間元數據內容,用戶可以共享空間信息、維護數據結果,以及對它們進行優化等。

(5)提供數據轉換方面的信息。使用戶在獲取空間信息的同時便可以得到空間元數據信息。通過空間元數據,人們可以接受並理解空間信息,與自己的空間信息集成在一起,進行不同方面的科學分析和決策。描述空間信息的元數據標准體系內容按照部分、復合元素和數據元素來組織,它們是依次包含關系,前者包含後者,即:後者依次組成前者。具體分為8個基本內容部分和4個引用部分,由12個部分組成,其中標准化內容包括標識信息、數據質量信息、數據集繼承信息、空間數據表示信息、空間參照系信息、實體和屬性信息、發行信息以及空間元數據參考信息等內容,另外還有4個部分是標准化部分中必須引用的信息,它們為引用信息、時間范圍信息、聯系信息及地址信息。元數據標准內容體系是通過元數據網路管理系統來實現的,該系統主要由許可權驗證功能(伺服器端驗證)、輸入和合法性校驗功能(客戶端校驗)、查詢功能(伺服器端查詢)與返回和顯示功能(伺服器端格式化查詢結果並返回,客戶端顯示)等組成。利用空間元數據網路管理系統作為空間交換站的共享軟體可基本上實現空間信息的網路共享。

6. 什麼是元數據

元數據(Meta Date),主要記錄數據倉庫中模型的定義、各層級間的映射關系、監控數據倉庫的數據狀態及ETL的任務運行狀態。一般會通過元數據資料庫(Metadata Repository)來統一地存儲和管理元數據,其主要目的是使數據倉庫的設計、部署、操作和管理能達成協同和一致。

元數據是數據倉庫管理系統的重要組成部分,元數據管理是企業級數據倉庫中的關鍵組件,貫穿數據倉庫構建的整個過程,直接影響著數據倉庫的構建、使用和維護。

7. 什麼是元數據

元數據被定義為:描述數據的數據,對數據及信息資源的描述性信息。數據倉庫在數據倉庫領域中,元數據按用途分成技術元數據和業務元數據。首先,元數據能提供基於用戶的信息,如記錄數據項的業務描述信息的元數據能幫助用戶使用數據。其次,元數據能支持系統對數據的管理和維護,如關於數據項存儲方法的元數據能支持系統以最有效的方式訪問數據。具體來說,在數據倉庫系統中,元數據機制主要支持以下五類系統管理功能:(1)描述哪些數據在數據倉庫中;(2)定義要進入數據倉庫中的數據和從數據倉庫中產生的數據;(3)記錄根據業務事件發生而隨之進行的數據抽取工作時間安排;(4)記錄並檢測系統數據一致性的要求和執行情況;(5)衡量數據質量。

8. 什麼是元數據(MetaData)及

元數據是對數據資源的描述,英文名稱是「Metadata」,通常被解釋為data about data,即關於數據的數據。元數據是信息共享和交換的基礎和前提,用於描述數據集的內容、質量、表示方式、空間參考、管理方式以及數據集的其他特徵。


隨著信息技術不斷發展,以及人們對信息共享的迫切需求,元數據技術被應用於更多的領域,如:在圖書館與信息界,元數據被定為提供關於信息資源或數據的一種結構化的數據,是對信息資源的結構化的描述;在數據倉庫領域中,元數據被 被定義為描述數據及其環境的數據;在軟體構造領域,元數據被定義為在程序中不是被加工的對象,而是通過其值的改變來改變程序的行為的數據。

9. 什麼是元數據 是資料庫中的概念 請不要說的太深奧 舉一個有代表性的例子來說明

元數據就是用來定義數據的數據.比如,有一條學生信息記錄,其中包括欄位姓名(name)、年齡(age)、性別(male)、班級(class)等,那麼name、age、male、class就是元數據.通過它們的描述,一條關於學生信息的數據記錄就產生;

閱讀全文

與項目中的元數據有哪些相關的資料

熱點內容
如何將數據某幾位數隱藏 瀏覽:436
白牡丹怎麼代理 瀏覽:903
為什麼市場上的凍排骨便宜 瀏覽:291
答題助手小程序怎麼用 瀏覽:877
租房如何引流小程序 瀏覽:443
海量數據被稱為什麼 瀏覽:819
atm機顯示交易失敗怎麼回事 瀏覽:201
微信數據佔用多怎麼處理 瀏覽:917
臨沂土雜市場在哪個路上啊 瀏覽:946
電腦怎麼自己編程序 瀏覽:350
簡單的小程序為什麼人都在做 瀏覽:995
什麼東西是市場沒有的 瀏覽:868
想自學數控技術下載什麼軟體好呢 瀏覽:631
vs怎麼讀取txt文件里的數據 瀏覽:449
洛川縣勞務市場在哪裡 瀏覽:829
速買通交易手續費是多少 瀏覽:299
在哪裡可以查到本企業報關數據 瀏覽:26
白燕盞代理要什麼條件 瀏覽:811
監察站信息員有哪些 瀏覽:609
什麼印花技術洗了不掉 瀏覽:430