dbt Cloudでドキュメントに記載のあるテストオプションを試してみた

customer_id,first_name,last_name,status
1,Michael,Scott,active
2,Dwight,Schrute,active
3,Jim,Halpert,inactive
4,Pam,Beesly,active
4,Andy,Bernard,inactive
,Angela,Martin,active
6,Kevin,Malone,shipped

order_id,customer_id,order_date,amount
1,1,2024-01-01,100
2,1,2024-01-15,150
3,2,2024-01-05,200
4,3,2024-01-20,50
5,4,2024-02-01,75
6,4,2024-02-10,125
7,99,2024-02-15,25
8,2,2024-02-20,-50

select
    customer_id,
    first_name,
    last_name,
    status
from {{ ref('raw_customers') }}

select
    order_id,
    customer_id,
    order_date,
    amount
from {{ ref('raw_orders') }}

select
    o.order_id,
    o.customer_id,
    o.order_date,
    o.amount,
    c.first_name,
    c.last_name,
    c.status
from {{ ref('stg_orders') }} AS o
left join {{ ref('stg_customers') }} AS c ON o.customer_id = c.customer_id

version: 2

models:
  - name: stg_customers
    columns:
      - name: customer_id
        description: "顧客の一意の識別"
        tests:
          # 'warn_if', 'error_if', 'limit' のデモ
          - unique:
              config:
                # 1件の重複は警告とし、2件以上でエラーとする
                warn_if: "= 1"
                error_if: "> 1"
                # パフォーマンスのため、失敗レコードを1件に制限
                limit: 1
          # 'where' のデモ
          - not_null:
              config:
                # 'active'ステータスの顧客にのみ非NULL制約を適用
                where: "status = 'active'"

      - name: status
        description: "顧客アカウントのステータス"
        tests:
          # 'severity' のデモ
          - accepted_values:
              values: ['active', 'inactive']
              config:
                # このテストが失敗してもパイプラインを止めず、警告のみを出す
                severity: warn

  - name: stg_orders
    columns:
      - name: customer_id
        description: "顧客テーブルへの外部キー"
        tests:
          # 'store_failures'と'store_failures_as'のデモ
          - relationships:
              to: ref('stg_customers')
              field: customer_id
              config:
                # --store-failures フラグ付きで実行した場合に失敗レコードを保存
                store_failures: true
                store_failures_as: view

version: 2

models:
  - name: stg_customers
    columns:
      - name: customer_id
        description: "The unique identifier for a customer."
        tests:
          # 'fail_calc' のデモ
          - unique:
              config:
                # 失敗の計算方法を「重複している値の数」から「重複しているレコードの総数」に変更
                fail_calc: "case when count(*) > 0 then sum(n_records) else 0 end"
                # fail_calcの変更により、失敗数が2になるため、WARNになる
                error_if: "< 2"
                warn_if: ">= 2"

version: 2

models:
  - name: stg_customers
    columns:
      - name: customer_id
        description: "顧客の一意の識別"
        tests:
          # 'warn_if', 'error_if', 'limit' のデモ
          - unique:
              config:
                # 1件の重複は警告とし、2件以上でエラーとする
                warn_if: "= 1"
                error_if: "> 1"
                # パフォーマンスのため、失敗レコードを1件に制限
                limit: 1
          # 'where' のデモ
          # - not_null:
          #     config:
          #       # 'active'ステータスの顧客にのみ非NULL制約を適用
          #       where: "status = 'active'"

      - name: status
        description: "顧客アカウントのステータス"
        tests:
          # 'severity' のデモ
          - accepted_values:
              values: ['active', 'inactive']
              config:
                # このテストが失敗してもパイプラインを止めず、警告のみを出す
                severity: warn