dbtの認定試験『dbt Analytics Engineering Certification Exam』が5月から新しくなるようです #dbt

アライアンス事業部 エンジニアグループ モダンデータスタック(MDS)チームのしんやです。

dbtでは認定試験が展開されていますが、その中の1つ『dbt Analytics Engineering Certification Exam』が2024年05月から新しくなるようです。(公式ページを覗いてみたらそういう案内がされていました)

日付的には2024年05月01日から変わる模様。

当エントリでは、以前のものとどういう部分が変わっているのかについてその内容を確認してみたいと思います。

対象となるdbtのバージョンについて

まずはじめに、一番分かりやすい変更点から。対象となるdbtのバージョンが従来の『1.1』からほぼ最新の『1.7』となります。(2024年04月時点で登場しているバージョンは1.8だがまだβ版なので)

• dbt Analytics Engineering Certification Exam

• dbt Analytics Engineering Certification Exam (live version from 05/01/2024)

出題範囲と内容について

そして出題範囲と内容も当然ながら変わる形となります。これまでの試験に関する内容はこちらをご参照ください。

そして以下が新しい試験における試験範囲となります。箇条書きの部分と合わせて、該当しそうな関連ドキュメントやブログエントリのリンクも並べておきました。

dbtモデルの開発

• 生データオブジェクトの依存関係の特定・検証
  • How do I create dependencies between models? | dbt Developer Hub
• コアとなるdbtマテリアライゼーションの理解
  • Materializations | dbt Developer Hub
• モジュール化の概念とDRY原則の取り入れ方
  • What is DRY? Hint: It makes for great code - dbt Labs
  • Data modeling techniques for more modularity
• ビジネスロジックをパフォーマンスの高いSQLクエリに変換
  • Developing dbt Models: converting business logic into performant SQL queries - Business Intelligence MX
  • Refactoring legacy SQL to dbt | dbt Labs
  • Refactoring legacy SQL to dbt | dbt Developer Hub
• run、test、docs、seedなどのコマンドの使用
  • dbt Command reference | dbt Developer Hub
    • About dbt run command | dbt Developer Hub
    • About dbt test command | dbt Developer Hub
    • About dbt docs commands | dbt Developer Hub
    • About dbt seed command | dbt Developer Hub
• モデルの論理フローの作成、クリーンなDAGの構築
  • What is a DAG and why is it important? - dbt Labs
  • dbt DAG: Definition, Usage, and Examples - PopSQL
• dbt_project.ymlにおける設定の定義
  • dbt_project.yml | dbt Developer Hub
• dbtにおけるソースの設定
  • Add sources to your DAG | dbt Developer Hub
• dbtパッケージの使用
  • Packages | dbt Developer Hub
• 開発ライフサイクルにおけるgit機能の活用
  • About git | dbt Developer Hub
  • Version control basics | dbt Developer Hub
• Pythonモデルの作成
  • Version control basics | dbt Developer Hub
  • dbtのpythonモデルについて | Hakky Handbook
• grants "設定によるモデルへのユーザーアクセスの提供
  • grants | dbt Developer Hub

dbtモデルのガバナンスを理解する

• モデルにコントラクトを追加し、モデルの形を保証する
  • contract | dbt Developer Hub
  • Model contracts | dbt Developer Hub
• 異なるバージョンのモデルを作成し、古いモデルを非推奨にする
  • Model versions | dbt Developer Hub
  • Clean your warehouse of old and deprecated models - Show and Tell - dbt Community Forum
• モデルアクセスの設定
  • Model access | dbt Developer Hub

データモデリングにおけるエラーのデバッグ

• ログに記載されたエラーメッセージを理解する
  • Debug errors | dbt Developer Hub
  • Events and logs | dbt Developer Hub
• コンパイル済みコードを使ったトラブルシューティング
  • About dbt compile command | dbt Developer Hub
  • Troubleshooting FAQs | dbt Developer Hub
• .ymlコンパイルエラーのトラブルシューティング
  • compiler errors - In dbt, when I add a well formatted .yml file to my project, I stop being able to run dbt or compile SQL until I delete the yaml file. Why? - Stack Overflow
  • dbt compile fails - "File(space)(space)was not found." - Help - dbt Community Forum
• dbtコアとデータプラットフォームのエラー応答の区別
• 修正の開発と実装、およびマージ前のテスト
  • Best practices for workflows | dbt Developer Hub
  • The Exact GitHub Pull Request Template We Use at dbt Labs | dbt Developer Blog
  • GitHub ActionsでdbtのCI/CDを実装する①自動テスト #GitHubActions - Qiita
  • GitHub ActionsでdbtのCI/CDを実装する②手動テスト #GitHubActions - Qiita

データパイプラインの管理

• DAG内の障害ポイントのトラブルシューティングと管理
  • Understanding DAGs in dbt: Erring Models and Failing Tests | by Paulo Morales Castillo | Medium
  • Understanding DAGs in dbt: Threads, Errors and Failing Fast
• dbt cloneの使用
  • About dbt clone command | dbt Developer Hub
  • Clone incremental models as the first step of your CI job | dbt Developer Hub
• 統合ツールからのエラーのトラブルシューティング

dbt testの実装

• 多種多様なモデルやソースに対する汎用テスト、単数テスト、カスタムテスト、カスタムジェネリックテストの使用
  • Add data tests to your DAG | dbt Developer Hub
  • About dbt test command | dbt Developer Hub
  • Unit tests | dbt Developer Hub
• dbtモデルとソースの前提条件のテスト
  • Add data tests to your DAG | dbt Developer Hub
• ワークフローにおける様々なテストステップの実装
  • Best practices for workflows | dbt Developer Hub
  • Best Practices for Workflows: A Guide to Effective dbt Use | by Turkel | Medium
  • What Is Dbt Testing? Definition, Best Practices, And More

dbtドキュメントの作成とメンテナンス

• dbtドキュメントの更新
  • About documentation | dbt Developer Hub
  • Build and view your docs with dbt Cloud | dbt Developer Hub
• ymlファイルにおけるソース、テーブル、カラムの記述の実装
  • description | dbt Developer Hub
• マクロを使用してDAG上のモデルとデータの系統を表示する
  • Data Lineage when query/model in macro - Archive - dbt Community Forum
  • What is data lineage? And how do you get started?

外部依存の実装と維持

• dbtエクスポージャの実装
  • Add Exposures to your DAG | dbt Developer Hub
  • Exposure properties | dbt Developer Hub
  • dbt exposureによるデータ基盤アウトプットの登録を自動化しました - Timee Product Team Blog
• ソースの鮮度の実装
  • Add Exposures to your DAG | dbt Developer Hub
  • freshness | dbt Developer Hub

dbtステートの活用

• 状態を理解する
  • Project state in dbt Cloud | dbt Developer Hub
  • Caveats to state comparison | dbt Developer Hub
• dbt retryの使用
  • About dbt retry command | dbt Developer Hub
  • Retry your dbt jobs | dbt Developer Hub
  • Retry your dbt jobs | dbt Developer Hub
• ステート・セレクタと結果セレクタの組み合わせ
  • Syntax overview | dbt Developer Hub

　

まとめ

という訳で、dbtの認定試験『dbt Analytics Engineering Certification Exam』がアップデートされますという内容のお知らせでした。

dbtのスキルアップに効果的なこちらの認定試験、ポイントを押さえてマスターしていきたいですね！

• dbt の記事一覧 | DevelopersIO