developersIO
produced by Classmethod
AWS
Bedrock
CDK
Google Cloud
Azure
生成AI
Claude
MCP
セキュリティ
モダンデータスタック
セミナー
会社説明会
事例
採用
データ事業本部所属。Pythonとデータ分析が好きです。
k.uehara
uehara-kota
92
Posts
k.ueharaが執筆した記事
Amazon MSKでSASL/SCRAM認証を試してみた
k.uehara
2025.09.09
Amazon MSKのマネージドVPC接続を利用して別アカウントのLambdaでメッセージを受信してみた
k.uehara
2025.09.05
Amazon MSK Serverless + Lambda + EventBridge PipesでサーバーレスなKafka環境を構築してみた
k.uehara
2025.09.02
【Redshift】デフォルトの暗号化がSSE-KMSであるS3バケットにUnloadする際はパラメータの指定を考慮する必要があることに注意しよう
k.uehara
2025.08.27
【Redshift】 MCP ServerとClaude Codeを利用して自然言語でデータの読み書きをしてみた
k.uehara
2025.06.24
【Databricks】OLTPデータベースであるLakebaseを触ってみた
k.uehara
2025.06.13
DatabricksのマネージドMCPサーバーを利用してみた
k.uehara
2025.06.12
【Databricks】Delta Sharingを利用してデータを共有してみた
k.uehara
2025.05.21
DatabricksでProphetを利用して時系列予測をしてみた
k.uehara
2025.05.09
dbt CoreからDatabricksにOAuthで接続してみた
k.uehara
2025.04.21
Databricks Appsを触ってみた【Streamlit】
k.uehara
2025.04.16
【Databricks】Iceberg REST catalogを利用してPyIcebergでアクセスしてみた
k.uehara
2025.04.10
DatabricksでS3に外部テーブルとして作成したDeltaテーブルにローカル環境のPythonからアクセスしてみた
k.uehara
2025.04.09
【Databricks】自然言語を用いて分析・可視化ができるAI/BI Genieを試してみた
k.uehara
2025.04.07
AWS Glue for SparkからDatabricksのテーブルにアクセスしてみた
k.uehara
2025.04.04
【Databricks】Auto LoaderとDLTを利用してS3に連携されるファイルで増分更新・洗い替えをしてみた
k.uehara
2025.04.02
DatabricksのUnity Catalogを利用してS3にDelta Lakeを構築する
k.uehara
2025.03.31
DatabricksのUnity Catalogを利用してS3のデータを外部テーブルとして読み込んでみた
k.uehara
2025.03.28
Lambda+Glue+Step Functionsの構成をTerraformでデプロイしてみた
k.uehara
2025.03.14
dbt Coreのモデル作成失敗時にSlack通知を行うLambda関数を作成する
k.uehara
2025.02.28
dbt Coreで生成したドキュメントをCloudflare Pagesでホスティングしてみる
k.uehara
2025.02.27
「オンプレとAWSをDirect Connectで接続したい」と言われたときの第一歩
k.uehara
2025.01.22
Brazeの配列の消費データポイントをAPIを叩いて確認してみる
k.uehara
2025.01.17
[小ネタ]dbt-databricksでINCONSISTENT_BEHAVIOR_CROSS_VERSION.DATETIME_WEEK_BASED_PATTERNエラーが発生したときの対処方法
k.uehara
2024.12.18
DockerでローカルにIceberg + Spark環境を構築し、DBeaverで接続してみた
k.uehara
2024.12.18
BigQueryでコミュニティUDFを利用してURLのパースを行ってみた
k.uehara
2024.11.06
AWS STSの一時認証情報を利用してGASからS3のcsvに対してデータの読み書きをしてみた
k.uehara
2024.11.05
Devcontainerを用いてPythonやAWS CDK・Serverless Frameworkなどのデプロイ環境の構築をしてみた
k.uehara
2024.07.29
【AWS CDK】BucketDeploymentのpruneの設定値はデフォルトでtrueであることに注意しよう
k.uehara
2024.07.26
【AWS CDK】LambdaのL1コンストラクトでlambda.Codeクラスを使ってデプロイする
k.uehara
2024.07.25
【AWS CDK】Step Functions内のLambdaをGlue (Python Shell)に置き換えてみた
k.uehara
2024.07.24
Serverless Frameworkの有償化に伴いAWS CDKとAWS SAMへの移行について検討してみた
k.uehara
2024.06.21
AWS CDKでStep Functionsの定義をyamlで外出しして記載してみた
k.uehara
2024.06.03
Lambda+Glue+Step Functionsの構成をAWS CDKでデプロイしてみた
k.uehara
2024.05.29
【初心者向け・Python】VSCodeで特定のディレクトリのみ保存時に自動でBlackとisortのフォーマットをかける方法
k.uehara
2024.05.17
S3にあるparquetファイルのメタデータのみにアクセスしてスキーマ情報を取得する
k.uehara
2024.05.09
yqを利用してSAMのテンプレートファイルを分割する
k.uehara
2024.04.03
Lambda+Glue+Step Functionsの構成をServerless FrameworkとAWS SAMのそれぞれでデプロイしてみた
k.uehara
2024.04.02
Glueの実行時間が指定した値を超えた場合に通知を受け取る方法
k.uehara
2024.03.28
S3間で容量の大きいファイルをBoto3を使ってコピーする際はmultipart_chunksizeに注意
k.uehara
2024.03.19
dbtでモデルのconfigに設定された値を別のスクリプトから参照する方法
k.uehara
2024.02.07
S3上のファイルの文字列置換を部分的にメモリに読み出しながら実施する方法
k.uehara
2024.02.02
【Python】pandasでEUC-JPの全角ハイフンがUTF-8に上手く変換できない際の対処法
k.uehara
2024.01.26
【Redshift】dbtのgeneric testを利用してdbtでモデル化されていないテーブルとの完全一致テストを実施する
k.uehara
2024.01.26
dbt-datamocktoolを使ってテスト用の入出力ファイルを用いたモデルのロジックテストをしてみた
k.uehara
2023.12.15
ECSとStep Functionsでdbtを動かし、Redshiftへデータを連携するデータパイプラインを構築する
k.uehara
2023.12.08
dbtを手軽に試す!Dockerを利用してPostgreSQLと一緒に簡単セットアップ
k.uehara
2023.12.01
[小ネタ]polarsのread_csvで全ての列を文字列型として読み込む方法
k.uehara
2023.11.28
『dbtで始めるデータパイプライン構築〜入門から実践〜』をdbt Core (CLI)で実施する
k.uehara
2023.11.27
Serverless Frameworkのserverless-step-functions pluginで起動トリガーにEventBridgeスケジューラが使用できるようになっていました
k.uehara
2023.11.15
EventBridgeを時間指定で有効化/無効化するEventBridgeを作成する
k.uehara
2023.11.15
Redshiftで簡単に特定のカラム以外をSELECTする方法
k.uehara
2023.11.13
Glue (Python Shell)の一時ディレクトリの容量について
k.uehara
2023.10.20
クラスメソッドに入社して1年が経ったので振り返ってみる
k.uehara
2023.10.19
Lambda Layer用のawswrangler (AWS SDK for pandas)に含まれるPythonモジュールとバージョンを確認する
k.uehara
2023.09.29
AWS CloudShellを利用して簡単にAWS Lambda (Python)のLambda Layerを作成する
k.uehara
2023.09.22
AWS SDK for pandas (awswrangler)のredshift.to_sqlの利用ポイント
k.uehara
2023.09.08
Lambda Layers用のawswranglerをpipでインストールする他のモジュールと同じLayersに含めてデプロイする
k.uehara
2023.08.25
Amazon Neptune ServerlessでグラフDBを構築し、最短経路問題を解いてみた
k.uehara
2023.08.04
Pythonで容量の大きいCSVファイルを指定したサイズの複数ファイルに分割する
k.uehara
2023.08.02
1
2