許多企業正在處理分佈在本地系統、雲端服務和物聯網技術的多個資料庫和儲存庫中的越來越多的資料。這使得資料管理和資料品質變得複雜，阻礙資料從業者定位重要資料並從中獲取見解。
這就是資料目錄的用武之地。資料專業人員使用的現代系統可以自動、動態地偵測資料屬性、類型和設定檔。
繼續閱讀以了解有關數據目錄對組
織的影響的更多信息，並探索市場上的 15 個數據目錄。
什麼是數據目錄？
資料目錄是元資料的集合，與資料管理和搜尋功能結合，可協助資料使用者找到他們想要的資料。它充當可存取資料的清單，並提供資訊來評估資料對其預期應用的適用性。
這突顯了資料目錄的許多方面，包括資料管理、搜尋、庫存和評估，所有這些都依賴於提供資料收集的中央功能。
資料目錄工具使查找資料並確
定其用途變得更加容易，帶來的好處包括：
益處 描述
快速資產發現 數據目錄可以更輕鬆地識別數據，從而幫助員工提高工作效率。它概述了數據的來源、數據如何流經系統以及如何更改。
提高數據品質 當公司收到新資料時，員工必須填寫資料目錄中的許多欄位。當使用者瀏覽目錄時，他們可以了解資料的起源、轉換過程和編輯日期，這使他們在使用材料時更有信心。
提高效率 資料目錄促進名稱、定義和測量的統一，確保組織內的不同團隊對資料有共同的理解和使用。
增強安全性 企業資料目錄確保敏感資
料得到正確管理並允許適當的存取。組織可以追蹤資料的來源、訪客以及資料的使用方式，從而改善監管合規活動。
數據目錄有什麼作用？
資料目錄可以提供企業資料資產的單一圖片。目錄概念自關係資料庫早期就存在，當時團隊需要追蹤資料集如何跨 SQL 表連接、聯結和修改。
現代資料目錄解決方案從更廣泛的資
料來源（包括資料湖、資料倉儲、NoSQL 資料庫、雲端物件儲存等）清點和收集資訊。
它們也經常與資料治理軟 新西蘭 WhatsApp 號碼數據 體結合使用，以幫助組織跟上不斷變化的法規遵循要求和治理計劃的其他方面。此外，這些技術正在不斷發展以使用自然語言搜尋、機器學習和其他人工智慧功能。
15 個最佳資料目錄工具
1.阿蒙森資料目錄
資料來源：阿蒙森
Amundsen 旨在幫助使用者找到資料可用性、可信度、所有權、使用和可重複使用性問題的答案。 Amundsen 的主要功能包括簡單的元資料攝取、搜尋、發現、沿襲和視覺化。阿蒙森計畫現在由 Linux 基金會的人工智慧和數據分支監管。
Amundsen 的架構由許多服務組成，包括元資料服務、搜尋服務、前端服務和資料建構器。這些服務依賴 Neo4j 和 Elasticsearch 等技術，因此您需要學習如何使用它們來解決出現的困難。
2.馬爾克斯資料目錄
資料來源：馬爾克斯
Marquez 旨在解決 WeWork 的元資料管理問題。其主要目標是搜尋和視覺化資料資產，了解它們如何相互連接，以及它們從資料來源 購買和銷售功能可以幫助創 移動到目標環境時如何變化。 Marquez 也為 OpenLineage 鋪平了道路，這是一個即時記錄、操作和保存資料沿襲的解決方案。
Marquez 的主要功能是元資料管理和沿襲視覺化，特別強調與 dbt 和 Apache Airflow 等技術的交互作用。 Marquez 致力於提高資料信任、提供（沿襲）上下文，並使使用者能夠自助提供所需資料。
Marquez 目前正在孵化 Linux 基金會
的人工智慧和數據專案。儘管沒有明顯的公共計劃，但部落格、社區 Slack 頻道和文件提供了足夠的信息，讓您了解專案 最後的資料庫 開發的最新資訊。
3. Apache Atlas資料目錄
來源：阿帕契阿特拉斯
Apache Atlas 將資料表示為類型和實體，讓企業在 Hadoop 叢集上產生、組織和管理其資料資產。這些「實體」是包含有關元資料項及其關係的資訊的元資料類型的範例。
Apache 提供了尖端的「圖集建模」解決方案，可協助您描述資料的起源及其所有轉換和工件。該服務透過使用標籤和類別向事物添加元數據，消除了管理元資料的複雜性。儘管任何人都可以建立和指派專案標籤，但係統管理員使用 Atlas 規則控制類別。
4.DataHub資料目錄
資料來源：資料中心
DataHub 是一個基於事件的資料目錄，根據其功能集，可以將其視為類似於 OpenMetadata 的元資料平台。 LinkedIn 在內部創建並使用了它。他們決定在 2020 年初將其開源。
Acryl 現在是 DataHub 的主要開發者和維護者。他們的產品系列中也提供 DataHub SaaS 服務。儘管如此，Acryl 仍然致力於開源範例。這意味著大多數功能（如果不是全部）現在和將來仍然是開源版本的一部分。