nayu.t.s

nayu_t_s

Python、ビックデータ、データ分析・可視化が好物です。データアナリティクス事業本部。kaggle Notebooks Master。

nayu.t.s

nayu_t_s

69
Posts
165
Facebook Share
225
Twitter Share
100
はてブ
Loading...

nayu.t.sが執筆した記事

[AKIBA.AWS ONLINE #09]FargateとAthenaで作る、機械学習システム[資料公開]

nayu.t.s

2022.08.05

Fargateタスクで機械学習モデルの訓練・推論をしたのでポイントを整理してみた

nayu.t.s

2022.08.02

Athenaの結果確認をDigdagのretryでやってみた

nayu.t.s

2022.07.29

データ分析・機械学習システムの検証・開発依頼のための準備ポイントをまとめてみた

nayu.t.s

2022.07.28

FTPコマンドの練習環境を作ってみた

nayu.t.s

2022.07.07

boto3からSQSへのアクセスをmotoでモックしてみる

nayu.t.s

2022.07.04

BigQueryでDELETEとINSERTをスケジューリングして冪等なデータマート作成をしてみた

nayu.t.s

2022.06.27

BigQueryのエクスポート機能で、Cloud Storageのバケットにテーブルのデータをエクスポートしてみた

nayu.t.s

2022.06.22

Athenaのstruct型でオブジェクトの要素が増減したときの読み込みの様子を調べた

nayu.t.s

2022.06.13

DigdagのREST APIを使って指定したプロジェクトのワークフロー名を取得する

nayu.t.s

2022.06.06

PythonでBigQueryにスケジュールされたクエリを一覧・削除してみた

nayu.t.s

2022.05.24

Cloud FunctionsからAmazon SNSを使ってメールを送信する

nayu.t.s

2022.05.23

TensorBoardでXGBoostの学習結果を可視化する

nayu.t.s

2022.05.16

BigQueryで多段ビューのキャッシュの挙動をみてみる

nayu.t.s

2022.05.09

PythonでBigQueryにクエリをスケジューリングしてみた

nayu.t.s

2022.04.25

systemdでEC2の起動時・停止時にコマンドを実行してみる

nayu.t.s

2022.04.25

[データアナリティクス事業本部] 若手Pythonエンジニアとして１年間働いてみました！

nayu.t.s

2022.04.05

データアナリティクス事業本部のビッグデータチームのご紹介

nayu.t.s

2022.04.01

DigdagのREST APIを使って特定のワークフローの最新の実行結果を取得する

nayu.t.s

2022.03.28

EventBridgeとSNSで複数行のメール通知を送る方法をCloudFormationから試してみた

nayu.t.s

2022.03.24

CloudFormationで、Metric Mathを使用してダウンタイムを設定したCloudWatchアラームを作成する

nayu.t.s

2022.03.15

配列をネストしたJSONをJSON SerDeライブラリで読み込んでフラット化してみた

nayu.t.s

2022.03.09

CloudWatchアラームとSNSで日本語の件名・本文のメールを送るためのCloudFormationテンプレートを作ってみた

nayu.t.s

2022.02.24

PlotlyのPython用ライブラリで3Dプロットを試してみた

nayu.t.s

2022.02.16

PlotlyのPython用ライブラリでデータをテーブルで表示してみた

nayu.t.s

2022.02.15

Serverless Frameworkでリトライの調整ができる定期実行なLambda関数を作成する

nayu.t.s

2022.02.03

Athenaで2時点間の時点をランダムに作ってみた

nayu.t.s

2022.01.24

アラームを実行するデータポイントでアラーム状態が短時間だけOK状態に戻る際の誤報を抑制する

nayu.t.s

2022.01.18

SQSのメトリクスから標準キューが空であることを確認してみた

nayu.t.s

2022.01.11

RedshiftのCOPYコマンドでDELIMITERパラメータを指定してみた

nayu.t.s

2022.01.06

Lambdaをスケジュール実行して関数エラーが起きた際の再試行を確認してみた

nayu.t.s

2021.12.21

XGBoostのScikit-Learn APIを機械学習パイプラインと一緒に使ってみた

nayu.t.s

2021.12.14

パーティション射影の列挙型と挿入型の違いについてまとめてみた

nayu.t.s

2021.12.14

AWS Systems Managerのパラメータストアに登録したJSONをシェルから利用する

nayu.t.s

2021.12.02

scikit-learnのextract_patches_2dで画像を小さいパッチに切り出す

nayu.t.s

2021.11.24

[AKIBA.AWS ONLINE #07]Redshift内のデータの活用をAthenaにオフロードしてみた[資料公開]

nayu.t.s

2021.11.24

CVATのアノテーションタスクをほかの人と共有する

nayu.t.s

2021.11.16

CVATに既存のアノテーションをインポートする

nayu.t.s

2021.11.01

Jupyter Docker StacksのイメージにJuliaのパッケージを追加する

nayu.t.s

2021.10.18

JupyterHubのpre_spawn_hookでコンテナ起動前にブートストラップを実行する

nayu.t.s

2021.10.13

JupyterHubのDockerSpawnerで起動するイメージを替える

nayu.t.s

2021.10.12

CloudFormationでSNSトピックへの複数のイベント通知を設定したS3バケットを作成する

nayu.t.s

2021.10.05

scikit-learn 1.0でstableになったHistGradientBoostingClassifierを使ってみる

nayu.t.s

2021.09.27

FeatureUnionを使って機械学習パイプライン内で複数の変換結果を連結する

nayu.t.s

2021.09.24

Amazon Athenaで週次の集計を行う

nayu.t.s

2021.09.13

Julia実行環境として利用できるコンテナイメージ3つを調べてみた

nayu.t.s

2021.09.06

make_column_selectorで型・正規表現からカラムのサブセットを選択する

nayu.t.s

2021.09.06

DictVectorizerで辞書のリストを処理する機械学習パイプラインを作る

nayu.t.s

2021.09.02

ColumnTransformerで特徴ごとに異なる変換を行うパイプラインを構築する

nayu.t.s

2021.08.23

scikit-learnのpipelineモジュールで機械学習パイプラインを作る

nayu.t.s

2021.08.23

plotly.expressパッケージのscatter_mapboxで地図に散布図を描いてみる

nayu.t.s

2021.08.10

Amazon Athenaでカラムの値からJSONを作る

nayu.t.s

2021.08.05

Jupyter Docker Stacksのコンテナをカスタマイズする

nayu.t.s

2021.07.29

JupyterLab環境構築から始めるTerraform

nayu.t.s

2021.07.21

Amazon SNSのrawメッセージ配信設定の違いをCloudFormationで手軽に勉強する

nayu.t.s

2021.07.16

CVATでバウンディングボックスをアノテーションしてみる

nayu.t.s

2021.07.16

AWS Glue DataBrewにYAML形式のレシピファイルをインポートしてみた

nayu.t.s

2021.07.13

AWS Glue DataBrewにレシピをインポートしてみた(AWS CLI編)

nayu.t.s

2021.07.07

AWS CDK(Python)で特定のIPからのみアクセスできるS3バケットを作成してみた

nayu.t.s

2021.07.02

AWS Glue DataBrewにレシピをインポートしてみた(AWSマネジメントコンソール編)

nayu.t.s

2021.07.01