元數據管理 元數據管理開源工具


元數據管理 元數據管理開源工具

文章插圖
大家好,小耶來為大家解答以上的問題 。元數據管理開源工具,元數據管理這個很多人還不知道,現在讓我們一起來看看吧!
1、元數據(Meta Date),主要記錄數據倉庫中模型的定義、各層級間的映射關系、監控數據倉庫的數據狀態及ETL的任務運行狀態 。
2、一般會通過元數據資料庫(Metadata Repository)來統一地存儲和管理元數據,其主要目的是使數據倉庫的設計、部署、操作和管理能達成協同和一致 。
3、元數據是數據倉庫管理系統的重要組成部分,元數據管理是企業級數據倉庫中的關鍵組件,貫穿數據倉庫構建的整個過程,直接影響著數據倉庫的構建、使用和維護 。
4、構建數據倉庫的主要步驟之一是ETL 。
5、這時元數據將發揮重要的作用,它定義了源數據系統到數據倉庫的映射、數據轉換的規則、數據倉庫的邏輯結構、數據更新的規則、數據導入歷史記錄以及裝載周期等相關內容 。
6、數據抽取和轉換的專家以及數據倉庫管理員正是通過元數據高效地構建數據倉庫 。
7、用戶在使用數據倉庫時,通過元數據訪問數據,明確數據項的含義以及定制報表 。
8、數據倉庫的規模及其復雜性離不開正確的元數據管理,包括增加或移除外部數據源 , 改變數據清洗方法,控制出錯的查詢以及安排備份等 。
9、元數據可分為技術元數據和業務元數據 。
10、技術元數據為開發和管理數據倉庫的IT 人員使用,它描述了與數據倉庫開發、管理和維護相關的數據,包括數據源信息、數據轉換描述、數據倉庫模型、數據清洗與更新規則、數據映射和訪問權限等 。
11、而業務元數據為管理層和業務分析人員服務 , 從業務角度描述數據,包括商務術語、數據倉庫中有什么數據、數據的位置和數據的可用性等,幫助業務人員更好地理解數據倉庫中哪些數據是可用的以及如何使用 。
【元數據管理 元數據管理開源工具】12、由上可見 , 元數據不僅定義了數據倉庫中數據的模式、來源、抽取和轉換規則等,而且是整個數據倉庫系統運行的基?。?元數據把數據倉庫系統中各個松散的組件聯系起來,組成了一個有機的整體什么是元數據管理?企業用戶在創建了眾多數據庫信息時,需要一個查詢功能可以及時高效地為用戶查詢數據庫信息,如數據源、表以及視圖等信息 。
13、DataPipeline元數據管理功能可以用戶降低時間成本,提高查詢效率 。
14、元數據管理能做到什么?元數據管理能帶給用戶的核心功能有:支持篩選查詢已創建的數據源/表/視圖信息 。
15、2、支持查看總覽查詢所有已創建的數據庫信息 。
16、3、支持用戶輸入數據源名稱/類型/負責人/創建人查詢數據源信息 。
17、4、支持用戶輸入表名稱、負責人、Comment查詢表信息 。
18、5、支持用戶輸入視圖名稱、負責人、Comment查詢視圖信息 。
19、6、支持用戶在搜索結果中對數據源和創建人進行篩選 。
20、7、支持查詢數據源類型為MySQL、Oracle、SQL Server、PostgreSQL、FTP、S3數據源 。
21、8、支持用戶在總覽列表頁進行搜索 。
22、如何使用元數據管理?元數據管理首頁頂部顯示搜索入口提示文案:請輸入搜索關鍵詞(如數據源、表、視圖、字段、標簽名稱)搜索范圍:數據源搜索范圍:數據源名稱、數據源類型、創建人、負責人、標簽表搜索范圍:表名稱、負責人、Comment、標簽視圖搜索范圍:視圖名稱、負責人、Comment、標簽字段搜索范圍:字段名稱、標簽、別名、描述 。
本文到此分享完畢 , 希望對大家有所幫助 。