developersIO

kasama(yosh-k)

PythonやAWSを極めたいと思っているエンジニアです！ ブログについてご指摘ありましたらご連絡お願いします！
78Posts
Snowflake × TerraformのマルチアカウントCI/CD環境をGitHub Actionsで構築してみた
kasama
2025.10.11
DuckDBでS3のCSVとBigQueryデータの差分を比較してみた
kasama
2025.10.04
DynamoDB → Amazon SageMaker Lakehouse のクロスアカウント環境におけるZero-ETL統合を試してみた
kasama
2025.09.09
Snowflake × Terraform のディレクトリ構成パターンを比較検討してみた
kasama
2025.09.07
GitHub IssueをトリガーにClaude Code GitHub ActionsでPR作成・レビュー・修正まで自動化してみた
kasama
2025.08.14
ObsidianのDaily Note作成をClaude Codeで半自動化してみた
kasama
2025.08.01
【初心者向け】 Claude Code × Obsidian × Vertex AI を使って個人ナレッジ管理を始めてみた
kasama
2025.07.10
DuckDBを使ってS3に格納されているParquetファイルを調査してみた
kasama
2025.07.05
AWS DMS Serverlessはタスクを停止しても48時間はDCUを消費します
kasama
2025.06.21
【登壇資料】 「DuckDBのデータエンジニア観点での使い道 (2025年5月版)」というタイトルで社内で登壇しました
kasama
2025.05.29
DuckDBでCloudShellやローカルPCからIceberg tableへSelectしてみた
kasama
2025.05.24
MotherDuckのMCP Serverを使ってCursorでのdbt ローカル開発を試してみた
kasama
2025.05.21
[新機能] 入力しながら即座にクエリ結果確認ができるInstant SQLをDuckDB Local UIから試してみた
kasama
2025.05.10
CloudShell上のDuckDBからVPC Peeringで別アカウントのRDS for MySQLに接続してみた
kasama
2025.05.05
【小ネタ】 Amazon AthenaでのEXCEPTを使用したテーブルデータ差分比較
kasama
2025.04.22
Snowflake AI & ML StudioでLLMサービスを試してみた
kasama
2025.04.16
【小ネタ】 Amazon AthenaのMERGE INTOでIcebergテーブルへのソースデータ重複を検証
kasama
2025.04.10
AWS LambdaでDuckDBとAWS Data Wrangler、Polarsの処理性能を比較してみた
kasama
2025.04.01
SnowflakeのCortex Agentsを試してみた
kasama
2025.03.16
【AWS CDK】 AWS Lake FormationのHybrid Access modeで権限管理
kasama
2025.03.13
AWS Lake Formationを有効にした時の既存リソース(Glue,S3)へのアクセスについて整理してみる
kasama
2025.02.05
【AWS CDK】 Glue L2 Construct alphaがリリースされたのでPython Shell Jobsで試してみる
kasama
2025.02.02
Vertex AIのGemini 1.5 Proで動画ファイルから議事録を生成する
kasama
2025.01.17
【CDK】AppFlowでSalesforceからS3へデータロード
kasama
2025.01.06
【Informatica CDI】S3からSnowflakeへのデータロード
kasama
2025.01.01
Amazon Athenaのパーティション射影でNOWを使用したyear/month/day パーティショニングの実装方法
kasama
2024.12.27
DevcontainerでPostgreSQL学習環境を手軽に構築する
kasama
2024.12.05
aws-samplesでCDKによるAmazon DataZoneの構築
kasama
2024.11.15
Amazon DataZoneでデフォルトのデータレイクプロファイルで既存のS3 Bucketと連携しAthenaでクエリしてみた
kasama
2024.11.10
Amazon DataZoneのワークショップをやってみて理解した概念をまとめてみる
kasama
2024.10.27
【小ネタ】Amazon DataZoneのドメインを再作成して環境作成時にdata lake administrator: invalid principal detected. エラー
kasama
2024.10.25
【小ネタ】Amazon Bedrock Knowledge Basesのデータソースの同期ボタンが反応しない時の対処法
kasama
2024.10.03
AWS CDKとPythonでの開発環境をDevcontainerで作成
kasama
2024.09.25
【初心者向け】S3バケット内の特定ファイルを一括で別フォルダに移動するコマンド
kasama
2024.08.29
【CDK】Lambda Python で構造化された JSON ログをカスタムフォーマッターにしてみる
kasama
2024.08.21
Informatica CLAIRE GPTを試してみた
kasama
2024.07.28
【CDK】Glue Python Shellで自作関数を用いる方法
kasama
2024.07.11
【CDK】EventBridgeとS3をマッチングして特定パス・ファイル名でトリガーを制御する方法
kasama
2024.06.29
バージョニングファイルと処理済みファイルをタグ付けしてS3 ライフサイクルポリシーで削除
kasama
2024.05.18
【CDK】Step FuctionsでLambdaを実行
kasama
2024.05.06
【CDK】Step FuctionsでGlue Python Shellを実行
kasama
2024.04.29
【CDK】Step FunctionsでS3のCOPY Objectを実行
kasama
2024.04.22
クラスメソッドに入社してもうすぐ２年なのでエンジニアとしてどのように働き学んできたかを振り返る
kasama
2024.03.13
Windowsインスタンスを構築してCloudWatch Alarmを試験してみる
kasama
2024.02.24
S3の特定フォルダへのクロスアカウントアクセスをIAM Roleで制限する
kasama
2024.02.18
Microsoft Copilot Proがリリースされたので試してみる
kasama
2024.01.18
paho-mqttをpytestでmock化してみる
kasama
2024.01.02
Googleスプレッドシートの英単語をクリックしたら音声で聞き取れる実装してみたが車輪の再発明だった件
kasama
2023.12.16
【Python】ExcelのTable定義書からRedshift DDLを自動生成
kasama
2023.11.29
gpt-4-vision-preview APIを使って画像からmdやjsonを生成してみる
kasama
2023.11.07
【書評】世界一流エンジニアの思考法
kasama
2023.11.04
【CDI】Informatica Cloud Data IntegrationでCSVデータ件数チェック処理の実装
kasama
2023.10.31
【CDI】Informatica Cloud Data Integrationでハンズオン課題を考えてみた
kasama
2023.10.19
【Informatica IDMC】Amazon S3 csvファイル ターゲット の形式オプション検証
kasama
2023.09.30
【IICS】GitHub Actionsを使用したIICS JOB自動テスト
kasama
2023.08.27
【小ネタ】シェルスクリプトからLambdaを呼び出す際のJSONエスケープエラーとその解決策
kasama
2023.08.13
【Python】Excelへの画像挿入とサイズ調整の自動化
kasama
2023.06.18
【IICS】マッピングのパラメータに現在日付を指定する方法
kasama
2023.06.03
Azure Computer Visionを用いて日本語画像から文字を出力してみた
kasama
2023.05.23
【new Bing】PDFが要約できるようなので試してみました
kasama
2023.05.05
1
2