Cover of Data Governance as Code, edition 2026.11.31, code VJ1S-X2E7 Data Governance as Code VJ1S-X2E7 49 editions since Oct 2026 Rolling Edition 2026.11.31

コードとしてのデータガバナンス

第2026.11.31版 2026年11月19日時点で例が通過 108 例中 108 例が合格 変更点

AIによる翻訳。英語版は人による検証済みである。 当社の書籍の作り方

英語版の書籍(版2026.11.31)から翻訳した。 原文を読む

オンライン学習プラットフォームの Iceberg テーブルを対象に、CI で実行されるコードによってデータ基盤をガバナンスする方法を扱う。テスト済みのカタログ、個人データの発見、パイプラインからのリネージ、行フィルタと列マスクとして実施されるアクセスポリシー、データを実際に削除する消去、監査証跡、そして AI が利用するデータのための規則を取り上げる。

対象読者 すでにパイプラインやウェアハウスを構築しており、それらにガバナンスを効かせるよう求められているデータエンジニア、アナリティクスエンジニア、プラットフォームエンジニアを対象とする。SQL、Python、Parquet に習熟しており、ほかのコードと同じようにテストとレビューが行われるガバナンスを求める読者に向けた本である。

読み始める
版の履歴2026年10月以降49 版各版と、その変更点
2026.10.12026.11.31
2026.11.31 · 2026年11月21日文章の修正、新しいコンテンツ33 節 節が変更された

目次

10 章、読了までおよそ12 時間 34 分、108 例を収録。

  1. 1ガバナンスをエンドツーエンドで実現する

    この章を終えると、データプラットフォームの1つのテーブルを、コードによってエンドツーエンドでガバナンスできるようになる。

  2. 2テスト可能なカタログ

    本章を終えると、カタログのメタデータをコードとして管理できるようになる。

  3. 3個人データの発見

    この章を読み終えると、データ基盤上の個人データを自動的に見つけ、その検出でどれだけ見落とすかを示せるようになる。

  4. 4Lineage from pipelines

    By the end of this chapter you can capture lineage from your pipelines as OpenLineage run events, with column lineage parsed from their SQL, including the columns that only join, filter and group.

  5. 5Access policies as code

    By the end of this chapter you can write a data platform's access rules as one policy that denies by default and returns row filters and column masks as data.

  6. 6クエリへのポリシーの強制

    この章を終えると、プラットフォームが実行するすべてのクエリに対してアクセス判定を強制できるようになる。

  7. 7保持、同意、消去

    この章を終えると、保持ルールをレビュー済みの設定として管理し、同意の撤回を次のクエリに反映させ、ある個人のデータが届いたすべてのテーブルからその人を消去できるようになる。

  8. 8監査と証跡

    本章を終えると、すべてのアクセス判定とクエリについて、値を含まず、改変があれば分かるように連鎖させた監査ログを保持できるようになる。

  9. 9AI向けデータのガバナンス

    本章を終えると、AI アシスタントが学習に用いるデータを、プラットフォームにおける他のあらゆる読み取りと同じ規則のもとで構築できるようになる。

  10. 10CI におけるガバナンス

    この章を終えると、2章から7章までのガバナンスチェックを、プルリクエストごとに1つのジョブとして実行できるようになる。

この節を引用する

形式

いずれの形式も、本訳書が従う英語版の書籍を出典として示す。

いずれの形式もこの版を明示している。そのリンクは現行版を開き、節の見出しには本文が最後に変更された日付が示される。アクセス日と取得日は、これを開いた日である。