kasama
PythonやAWSを極めたいと思っているエンジニアです！ ブログについてご指摘ありましたらご連絡お願いします！

kasama

yosh-k
76
Posts

kasamaが執筆した記事

DynamoDB → Amazon SageMaker Lakehouse のクロスアカウント環境におけるZero-ETL統合を試してみたDynamoDB → Amazon SageMaker Lakehouse のクロスアカウント環境におけるZero-ETL統合を試してみた
kasama
2025.09.09
Snowflake × Terraform のディレクトリ構成パターンを比較検討してみたSnowflake × Terraform のディレクトリ構成パターンを比較検討してみた
kasama
2025.09.07
GitHub IssueをトリガーにClaude Code GitHub ActionsでPR作成・レビュー・修正まで自動化してみたGitHub IssueをトリガーにClaude Code GitHub ActionsでPR作成・レビュー・修正まで自動化してみた
kasama
2025.08.14
ObsidianのDaily Note作成をClaude Codeで半自動化してみたObsidianのDaily Note作成をClaude Codeで半自動化してみた
kasama
2025.08.01
【初心者向け】 Claude Code × Obsidian × Vertex AI を使って個人ナレッジ管理を始めてみた【初心者向け】 Claude Code × Obsidian × Vertex AI を使って個人ナレッジ管理を始めてみた
kasama
2025.07.10
DuckDBを使ってS3に格納されているParquetファイルを調査してみたDuckDBを使ってS3に格納されているParquetファイルを調査してみた
kasama
2025.07.05
AWS DMS Serverlessはタスクを停止しても48時間はDCUを消費しますAWS DMS Serverlessはタスクを停止しても48時間はDCUを消費します
kasama
2025.06.21
【登壇資料】 「DuckDBのデータエンジニア観点での使い道 (2025年5月版)」というタイトルで社内で登壇しました【登壇資料】 「DuckDBのデータエンジニア観点での使い道 (2025年5月版)」というタイトルで社内で登壇しました
kasama
2025.05.29
DuckDBでCloudShellやローカルPCからIceberg tableへSelectしてみたDuckDBでCloudShellやローカルPCからIceberg tableへSelectしてみた
kasama
2025.05.24
MotherDuckのMCP Serverを使ってCursorでのdbt ローカル開発を試してみたMotherDuckのMCP Serverを使ってCursorでのdbt ローカル開発を試してみた
kasama
2025.05.21
[新機能] 入力しながら即座にクエリ結果確認ができるInstant SQLをDuckDB Local UIから試してみた[新機能] 入力しながら即座にクエリ結果確認ができるInstant SQLをDuckDB Local UIから試してみた
kasama
2025.05.10
CloudShell上のDuckDBからVPC Peeringで別アカウントのRDS for MySQLに接続してみたCloudShell上のDuckDBからVPC Peeringで別アカウントのRDS for MySQLに接続してみた
kasama
2025.05.05
【小ネタ】 Amazon AthenaでのEXCEPTを使用したテーブルデータ差分比較【小ネタ】 Amazon AthenaでのEXCEPTを使用したテーブルデータ差分比較
kasama
2025.04.22
Snowflake AI & ML StudioでLLMサービスを試してみたSnowflake AI & ML StudioでLLMサービスを試してみた
kasama
2025.04.16
【小ネタ】 Amazon AthenaのMERGE INTOでIcebergテーブルへのソースデータ重複を検証【小ネタ】 Amazon AthenaのMERGE INTOでIcebergテーブルへのソースデータ重複を検証
kasama
2025.04.10
AWS LambdaでDuckDBとAWS Data Wrangler、Polarsの処理性能を比較してみたAWS LambdaでDuckDBとAWS Data Wrangler、Polarsの処理性能を比較してみた
kasama
2025.04.01
SnowflakeのCortex Agentsを試してみたSnowflakeのCortex Agentsを試してみた
kasama
2025.03.16
【AWS CDK】 AWS Lake FormationのHybrid Access modeで権限管理【AWS CDK】 AWS Lake FormationのHybrid Access modeで権限管理
kasama
2025.03.13
AWS Lake Formationを有効にした時の既存リソース(Glue,S3)へのアクセスについて整理してみるAWS Lake Formationを有効にした時の既存リソース(Glue,S3)へのアクセスについて整理してみる
kasama
2025.02.05
【AWS CDK】 Glue L2 Construct alphaがリリースされたのでPython Shell Jobsで試してみる【AWS CDK】 Glue L2 Construct alphaがリリースされたのでPython Shell Jobsで試してみる
kasama
2025.02.02
Vertex AIのGemini 1.5 Proで動画ファイルから議事録を生成するVertex AIのGemini 1.5 Proで動画ファイルから議事録を生成する
kasama
2025.01.17
【CDK】AppFlowでSalesforceからS3へデータロード【CDK】AppFlowでSalesforceからS3へデータロード
kasama
2025.01.06
【Informatica CDI】S3からSnowflakeへのデータロード【Informatica CDI】S3からSnowflakeへのデータロード
kasama
2025.01.01
Amazon Athenaのパーティション射影でNOWを使用したyear/month/day パーティショニングの実装方法Amazon Athenaのパーティション射影でNOWを使用したyear/month/day パーティショニングの実装方法
kasama
2024.12.27
DevcontainerでPostgreSQL学習環境を手軽に構築するDevcontainerでPostgreSQL学習環境を手軽に構築する
kasama
2024.12.05
aws-samplesでCDKによるAmazon DataZoneの構築aws-samplesでCDKによるAmazon DataZoneの構築
kasama
2024.11.15
Amazon DataZoneでデフォルトのデータレイクプロファイルで既存のS3 Bucketと連携しAthenaでクエリしてみたAmazon DataZoneでデフォルトのデータレイクプロファイルで既存のS3 Bucketと連携しAthenaでクエリしてみた
kasama
2024.11.10
Amazon DataZoneのワークショップをやってみて理解した概念をまとめてみるAmazon DataZoneのワークショップをやってみて理解した概念をまとめてみる
kasama
2024.10.27
【小ネタ】Amazon DataZoneのドメインを再作成して環境作成時にdata lake administrator: invalid principal detected. エラー【小ネタ】Amazon DataZoneのドメインを再作成して環境作成時にdata lake administrator: invalid principal detected. エラー
kasama
2024.10.25
【小ネタ】Amazon Bedrock Knowledge Basesのデータソースの同期ボタンが反応しない時の対処法 【小ネタ】Amazon Bedrock Knowledge Basesのデータソースの同期ボタンが反応しない時の対処法
kasama
2024.10.03
AWS CDKとPythonでの開発環境をDevcontainerで作成AWS CDKとPythonでの開発環境をDevcontainerで作成
kasama
2024.09.25
【初心者向け】S3バケット内の特定ファイルを一括で別フォルダに移動するコマンド【初心者向け】S3バケット内の特定ファイルを一括で別フォルダに移動するコマンド
kasama
2024.08.29
【CDK】Lambda Python で構造化された JSON ログをカスタムフォーマッターにしてみる【CDK】Lambda Python で構造化された JSON ログをカスタムフォーマッターにしてみる
kasama
2024.08.21
Informatica CLAIRE GPTを試してみたInformatica CLAIRE GPTを試してみた
kasama
2024.07.28
【CDK】Glue Python Shellで自作関数を用いる方法【CDK】Glue Python Shellで自作関数を用いる方法
kasama
2024.07.11
【CDK】EventBridgeとS3をマッチングして特定パス・ファイル名でトリガーを制御する方法【CDK】EventBridgeとS3をマッチングして特定パス・ファイル名でトリガーを制御する方法
kasama
2024.06.29
バージョニングファイルと処理済みファイルをタグ付けしてS3 ライフサイクルポリシーで削除バージョニングファイルと処理済みファイルをタグ付けしてS3 ライフサイクルポリシーで削除
kasama
2024.05.18
【CDK】Step FuctionsでLambdaを実行【CDK】Step FuctionsでLambdaを実行
kasama
2024.05.06
【CDK】Step FuctionsでGlue Python Shellを実行【CDK】Step FuctionsでGlue Python Shellを実行
kasama
2024.04.29
【CDK】Step FunctionsでS3のCOPY Objectを実行【CDK】Step FunctionsでS3のCOPY Objectを実行
kasama
2024.04.22
クラスメソッドに入社してもうすぐ２年なのでエンジニアとしてどのように働き学んできたかを振り返るクラスメソッドに入社してもうすぐ２年なのでエンジニアとしてどのように働き学んできたかを振り返る
kasama
2024.03.13
Windowsインスタンスを構築してCloudWatch Alarmを試験してみるWindowsインスタンスを構築してCloudWatch Alarmを試験してみる
kasama
2024.02.24
S3の特定フォルダへのクロスアカウントアクセスをIAM Roleで制限するS3の特定フォルダへのクロスアカウントアクセスをIAM Roleで制限する
kasama
2024.02.18
Microsoft Copilot Proがリリースされたので試してみるMicrosoft Copilot Proがリリースされたので試してみる
kasama
2024.01.18
paho-mqttをpytestでmock化してみるpaho-mqttをpytestでmock化してみる
kasama
2024.01.02
Googleスプレッドシートの英単語をクリックしたら音声で聞き取れる実装してみたが車輪の再発明だった件Googleスプレッドシートの英単語をクリックしたら音声で聞き取れる実装してみたが車輪の再発明だった件
kasama
2023.12.16
【Python】ExcelのTable定義書からRedshift DDLを自動生成【Python】ExcelのTable定義書からRedshift DDLを自動生成
kasama
2023.11.29
gpt-4-vision-preview APIを使って画像からmdやjsonを生成してみるgpt-4-vision-preview APIを使って画像からmdやjsonを生成してみる
kasama
2023.11.07
【書評】世界一流エンジニアの思考法【書評】世界一流エンジニアの思考法
kasama
2023.11.04
【CDI】Informatica Cloud Data IntegrationでCSVデータ件数チェック処理の実装【CDI】Informatica Cloud Data IntegrationでCSVデータ件数チェック処理の実装
kasama
2023.10.31
【CDI】Informatica Cloud Data Integrationでハンズオン課題を考えてみた【CDI】Informatica Cloud Data Integrationでハンズオン課題を考えてみた
kasama
2023.10.19
【Informatica IDMC】Amazon S3 csvファイル ターゲット の形式オプション検証【Informatica IDMC】Amazon S3 csvファイル ターゲット の形式オプション検証
kasama
2023.09.30
【IICS】GitHub Actionsを使用したIICS JOB自動テスト【IICS】GitHub Actionsを使用したIICS JOB自動テスト
kasama
2023.08.27
【小ネタ】シェルスクリプトからLambdaを呼び出す際のJSONエスケープエラーとその解決策【小ネタ】シェルスクリプトからLambdaを呼び出す際のJSONエスケープエラーとその解決策
kasama
2023.08.13
【Python】Excelへの画像挿入とサイズ調整の自動化【Python】Excelへの画像挿入とサイズ調整の自動化
kasama
2023.06.18
【IICS】マッピングのパラメータに現在日付を指定する方法【IICS】マッピングのパラメータに現在日付を指定する方法
kasama
2023.06.03
Azure Computer Visionを用いて日本語画像から文字を出力してみたAzure Computer Visionを用いて日本語画像から文字を出力してみた
kasama
2023.05.23
【new Bing】PDFが要約できるようなので試してみました【new Bing】PDFが要約できるようなので試してみました
kasama
2023.05.05
【S3 Bucketへのアクセス管理】 特定のIAM RoleにのみS3 Bucketへのアクセスを許可し、IAM User GroupとIAM Roleで厳密にスイッチングする方法【S3 Bucketへのアクセス管理】 特定のIAM RoleにのみS3 Bucketへのアクセスを許可し、IAM User GroupとIAM Roleで厳密にスイッチングする方法
kasama
2023.05.04
ChatGPTの履歴データがExportできるようになっていましたChatGPTの履歴データがExportできるようになっていました
kasama
2023.04.16
1
2