# データ分析 の記事一覧

ストリーミングデータをSQLでリアルタイムに分析できる「Materialize」を使ってみた

[dbt] CI（継続的インテグレーション）を取り入れる

アメダスのデータから避暑地を探す

[발표자료] 데이터분석 아키텍쳐의 서버리스화

国土数値情報の緯度・経度情報をQuickSightで取り扱えるフォーマットに変換してみた

[Fivetran] S3に置いてる色々な形式のファイルをDWHに同期してみた

[dbt] データモデルの作成前や作成後にクエリを実行できるHooksを使ってみた

【レポート】ビジュアルツールで簡単に始められるデータ加工 #AWSSummit

FivetranだけでSlowly Changing Dimensionsが実現できる！History Modeを使ってみた

[세션레포트] 데이터 분석플랫폼을 위한 데이터 전처리부터 시각화까지 한번에 보기 #AWSSummitOnlineKorea

【レポート】AWS の分析マネージドサービスでデータ活用を加速しよう！#AWS-08 #AWSSummit

【レポート】データ分析におけるデータサイロ、機械学習モデル管理、 BIの制限 − これらの課題を解決します！ #PAR-25 #AWSSummit

[レポート] モダンデータウェアハウスにおける「キンボール」〜残す価値のあるもの、ないもの #dbtcoalesce

[レポート] モダンデータスタックの「明日」 #dbtcoalesce

My Journey In Data Analytics Department as Trainee 第２話

My Journey In Data Analytics Department as Trainee 第1話

DirectLiNGAMで構造方程式モデルを推定する

AWS Certified Data Analytics – Specialty(DAS) を取得できたので振り返ってみた

[dbt] データモデルの開発が便利になる「Package」を使ってみた（dbt_utils）

[dbt] 「incremental」というMaterializationを使ってデータモデルを増分更新する

[dbt] 生成するデータモデルの種類を変える「Materializations」を試す

[dbt] データウェアハウスにロードされているローデータを「sources」として定義する（と便利だよ）

[AWS Glue]string型のパーティションキーをPushdown Predicatesの数値の大小の条件でフィルターできるのか確認してみた

[AWS Glue]ジョブブックマークとPushdown Predicates併用時の動作を確認してみた

[dbt] 作成するデータモデルに関するドキュメントを生成する

SQL用フォーマッター「SQLFluff」を使ってみた

[dbt] 作成したデータモデルに対してテストを実行する

[レポート] dbtとAirflowとGreat Expectationsで堅牢なデータパイプラインを構築する #dbtcoalesce

[レポート] Dagsterでdbtをオーケストレーションする #dbtcoalesce

dbtのCLI版をインストールして使ってみた

[レポート] dbtとLookerを使ってデータガバナンスを効かせる #dbtcoalesce

[レポート] SQL用リンター「SQLFluff」 #dbtcoalesce

Spark DataFrameで日付列の値をもとに曜日列を追加する

Spark DataFrameのshow()メソッドで長い値が省略されないようにする

[レポート] Securing data at scale with dbt & Snowflake（dbtとSnowflakeでデータをセキュアに管理する） #dbtcoalesce

[レポート] dbt 101（dbt入門） #dbtcoalesce