Cover of Data Governance as Code, edition 2026.11.31, code VJ1S-X2E7 Data Governance as Code VJ1S-X2E7 49 editions since Oct 2026 Rolling Edition 2026.11.31

数据治理即代码

版次 2026.11.31 示例于 2026年11月19日 通过 108个示例中有108个通过 变化内容

AI 翻译。由人工以英文核验。 我们如何制作图书

译自英文版图书,版次 2026.11.31。 阅读原文

用在 CI 中运行的代码治理数据平台:经过测试的目录、发现个人数据、从数据管道得到的血缘、以行过滤器和列掩码实施的访问策略、真正删除数据的擦除、审计追踪,以及针对 AI 所用数据的规则,示例基于一个在线学习平台的 Iceberg 表。

适合谁 本书面向数据工程师、分析工程师和平台工程师:他们已经在构建数据管道和数据仓库,现在被要求对这些系统实施治理。读者应熟悉 SQL、Python 和 Parquet,并希望治理能像其他代码一样接受测试和评审。

开始阅读
版次历史自 2026年十月 以来的 49个版次每个版次及其变更内容
2026.10.12026.11.31
2026.11.31 · 2026年11月21日文字修订,新内容33节已更改

目录

10章,阅读约需 14小时 47分钟,包含 108个示例。

  1. 1端到端的数据治理

    读完本章,你可以用代码对数据平台中的一张表做端到端的治理。

  2. 2可测试的目录

    读完本章,你就能把目录的元数据当作代码来维护。

  3. 3查找个人数据

    读完本章,你将能够在数据平台上自动查找个人数据,并说明漏掉了多少。

  4. 4Lineage from pipelines

    By the end of this chapter you can capture lineage from your pipelines as OpenLineage run events, with column lineage parsed from their SQL, including the columns that only join, filter and group.

  5. 5Access policies as code

    By the end of this chapter you can write a data platform's access rules as one policy that denies by default and returns row filters and column masks as data.

  6. 6在查询上执行策略

    学完本章,你将能够对平台运行的每一条查询执行访问决策。

  7. 7保留期限、同意与删除

    学完本章,你将能把保留规则作为经过评审的配置来维护,让撤回同意在下一次查询时就生效,并把一个人的数据从它流经的每张表中删除。

  8. 8审计与证据

    读完本章,你将能够为每一次访问决策和每一次查询保存一份审计日志:日志中不含任何值,并且做成链式结构,使任何修改都会暴露。

  9. 9AI 数据治理

    读完本章,你将能够在与平台其他所有读取操作相同的规则下,构建 AI 助手学习所用的数据。

  10. 10CI 中的数据治理

    读完本章,你可以把第 2 章到第 7 章的治理检查合并为一个作业,在每个拉取请求上运行,并且只评判该拉取请求所改动的内容。

引用本节

格式

每种格式均引用英文原书,本译本以其为准。

每种格式都会注明该版次。其链接会打开当前版次,节标题处会说明该节文本最后一次修改的时间。访问日期和检索日期即为您打开此页的当天。