Cover of Data Governance as Code, edition 2026.11.31, code VJ1S-X2E7 Data Governance as Code VJ1S-X2E7 49 editions since Oct 2026 Rolling Edition 2026.11.31

資料治理即程式碼

版次 2026.11.31 範例於 2026年11 月 19 通過測試 108 個範例中有 108 個通過 變更內容

由 AI 翻譯。經人工以英文驗證。 我們如何製作書籍

譯自英文書,版次 2026.11.31。 閱讀原文

以在 CI 中執行的程式碼治理資料平台:經過測試的資料目錄、找出個人資料、從管線取得資料血緣、以列篩選與欄位遮罩強制執行的存取政策、真正移除資料的抹除機制、稽核軌跡,以及供 AI 使用之資料的規則,並以一個線上學習平台的 Iceberg 資料表為例。

適合對象 本書適合已經建置資料管線與資料倉儲、現在被要求納入治理的資料工程師、分析工程師與平台工程師:讀者熟悉 SQL、Python 與 Parquet,並希望治理工作能像其他程式碼一樣經過測試與審查。

開始閱讀
版次歷史自 2026年十月 以來的 49 個版次每個版次及其變動內容
2026.10.12026.11.31
2026.11.31 · 2026年11 月 21散文修訂、新內容33 節 已變更

目錄

10 章,閱讀時間約 15 小時 50 分鐘,附有108 個範例。

  1. 1端到端的資料治理

    讀完本章,你就能用程式碼,從頭到尾治理資料平台上的一張資料表。

  2. 2可測試的目錄

    讀完本章,你就能把目錄的中繼資料當成程式碼來維護。

  3. 3找出個人資料

    讀完本章後,你能在資料平台上自動找出個人資料,並說明漏掉了多少。

  4. 4Lineage from pipelines

    By the end of this chapter you can capture lineage from your pipelines as OpenLineage run events, with column lineage parsed from their SQL, including the columns that only join, filter and group.

  5. 5Access policies as code

    By the end of this chapter you can write a data platform's access rules as one policy that denies by default and returns row filters and column masks as data.

  6. 6對查詢強制執行政策

    讀完本章,你將能對平台執行的每一個查詢強制執行存取決策。

  7. 7保存期限、同意與刪除

    讀完本章後,你將能把保存期限規則維護為經過審查的設定、讓撤回同意影響下一次查詢,並從個人資料流經的每一個資料表中刪除該人的資料。

  8. 8稽核與證據

    讀完本章後,你將能為每一項存取決策與查詢建立一份稽核日誌,日誌中不含任何值,並以雜湊鏈串接,使任何編輯都會被察覺。

  9. 9為 AI 治理資料

    讀完本章,你將能在與平台其他所有讀取相同的規則下,建置 AI 助理用來學習的資料。

  10. 10CI 中的資料治理

    讀完本章後,你可以把第 2 章到第 7 章的治理檢查合併成一個工作,在每個 pull request 上執行,並且只評估該 pull request 所更動的內容。

引用本節

格式

各種格式皆引用英文原書,本譯本即依循該原書。

每種格式都會標示本版。其連結會開啟目前版次,節標題會說明該節內文最後一次變動的時間。存取日期與擷取日期即為你開啟此頁的當日。