Amazon AppFlowを使ってコードを書かずにSalesforceへのリバースETLをやってみた

「祝！Iceberg祭開幕！re:Invent 2024データレイク関連アップデート10分総ざらい」という登壇をしました #regrowth_osaka

AWS Glueを使ってコードを書かずにSalesforceへのリバースETLをやってみた

[アップデート]Apache Iceberg形式のテーブルデータに最適化されたストレージAmazon S3 Tablesが発表されました

[まるクラ勉強会 ONLINE #3] Amazon Personalizeの レコメンドシステム構築、実際何するの？ 〜大体10分で具体的なイメージをつかむ〜 #まるクラ勉強会

Amazon EventBridge SchedulerとAWS Glue Python Shellの定期実行をCDKで構築する

一定期間利用のないQuickSightのリーダー（閲覧者）アカウントを判別し、自動で削除する

[アップデート]Amazon Personalizeで自動トレーニングの設定をソリューション作成後でも変更できるようになりました

Amazon AthenaのMERGE文でWHEN NOT MATCHED BY SOURCEを再現する

Amazon QuickSightで分析のシートを別の分析にコピーする

Amazon AthenaとAWS Glueを使ってHiveテーブルからIcebergテーブルに移行する

Glue Data Qualityで品質検査ルールに不合格となったレコードを特定する

【資料公開】Iceberg で Amazon Athena をデータウェアハウスぽく使おう #midosuji_tech

[アップデート]Amazon Personalizeで新たなレシピUser-Personalization-v2とPersonalized-Ranking-v2が使えるようになりました

AWS入門ブログリレー2024〜Amazon Personalize編〜

Invalid principal in policyが出たら確認したい！IAMロール・IAMユーザーが削除されるとPrincipal要素のARNがプリンシパルIDに置き換わります

【資料公開】〜小さく始めて大きく育てる〜データ分析基盤の開発から活用まで #devio_osakaday1

[まるクラ勉強会 ONLINE #1] 20分で大体わかる！AWS Glue Data Qualityによるデータ品質検査

Amazon QuickSightでGoogle BigQueryのデータを可視化する方法いろいろ

AWS Glue Data Qualityが異常検出と動的ルールに対応 （プレビュー）#AWSreInvent

[速報]AWS GlueのAmazon Q統合が発表、自然言語でのデータ統合パイプライン作成が可能に（Coming Soon）#AWSreInvent

[アップデート]Amazon QuickSightの分析画面が新しくなりました

特定のAWS Glue CrawlerのCloudWatch Logsの文字列を検知して通知する

Pandasを使ってS3バケット上のExcelファイルをParquet形式に変換する

AWS Glue Studio Job Notebookで思わぬ課金を防ぐTips

Amazon QuickSightの名前空間を跨いでアセット共有可能な共有フォルダを作成する

[初心者向け]時間のかかる処理を中断せずに実行したいときは、EC2インスタンス上でtmuxを使ってみよう

Amazon QuickSightでExcel形式レポートのメール配信をスケジュール実行する

S3 Concatを使ってS3上にある大量の小さいオブジェクトを圧縮してファイルサイズを最適化しよう

Amazon QuickSightの条件付きルールでビジュアルの表示・非表示を切り替えよう

「ダッシュボードもコード管理！Amazon QuickSightで考えるBIOps」というタイトルで DevelopersIO 2023 大阪に登壇しました！ #devio2023

[アップデート]Amazon RedshiftでQUALIFY句がサポートされ、WINDOW関数を使った結果のフィルタが可能になりました

サポートエンジニアがデータ分析基盤コンサルタントになって、2023 Japan AWS Top Engineer (Analytics)になった思い出を振り返る #わたしとクラスメソッド

[アップデート]Amazon AthenaでS3 Glacierの復元されたデータにクエリできるようになりました

Amazon Redshiftの監査ログをパーティション化してAmazon Athenaでクエリする

Amazon QuickSightで日付の集計粒度を動的に変更する

Amazon QuickSightからパブリックアクセスを許可しないRedshift Serverlessへプライベート接続する

Amazon QuickSightの⽉単位契約のユーザーを年間単位契約へ切り替える

AWS Glue Data Quality(プレビュー)でデータ品質検査を試してみた

AWS Glue Custom Visual Transformsで独自の変換処理を作ってみた

Amazon AppFlowでGoogle Analytics 4のデータをAmazon S3に連携する

Amazon QuickSightのパフォーマンスを改善したい時のTips

Amazon QuickSight Paginated Reports（分割されたレポート）を試してみた

ExpoのSnowflakeブースでスキーに挑戦しよう！ #reinvent

[速報]Amazon Builders’ LibraryにCI/CDパイプラインと依存関係の分離についての記事が追加されました

Dance Dance Revolutionで踊ってきました #reinvent

[レポート] AWSのノーコード・ローコードサービスだけで顧客がローンを滞納するリスクを予測するAIモデルを構築・可視化するワークショップ（FSI305）に参加しました

[小ネタ]方向オンチでも広大なre:Invent会場で生き残るために知っておきたいこと #reinvent

[速報]データマネジメントを実現するAmazon DataZoneがついに登場しました！ #reinvent

[アップデート]AWS Glueで独自の変換を作成できるカスタムビジュアル変換（custom visual transform）が登場しました #reinvent

[アップデート] 最新バージョンGlue 4.0がリリースされました　#reinvent

Amazon QuickSightで異なる名前空間にテンプレートを配布する

Amazon QuickSightのユーザー分類とアセットの共有をおさらいする

Unsupported Hive type: jsonに負けず、Amazon Athenaでjson形式データのテーブルを作る

スキーマオンリードを理解してAmazon Athenaのアーキテクチャに詳しくなる

Amazon QuickSightの条件付き書式でダッシュボードを見やすくするTips

[アップデート]AWS GlueでのETLワークロードのコスト削減する実行オプション『Flexジョブ』が登場しました

Amazon AppFlowとAWS Glue DataBrewでPardotのデータをノーコードで取得～クレンジングする

Amazon AppFlowでMarketing Cloud Account Engagement（旧：Pardot）のデータをAmazon S3に連携する

INSERT is not supported for bucketed tablesに負けず、Amazon Athenaでバケッティングを設定したテーブルにデータを追加する