メインコンテンツへスキップ
developersIO

nayuta の記事一覧

データに関する支援をしています

nayutanayu_t_s

月別投稿数

368Posts
Fargateタスクで機械学習モデルの訓練・推論をしたのでポイントを整理してみた
nayuta
2022.08.02
Athenaの結果確認をDigdagのretryでやってみた
nayuta
2022.07.29
データ分析・機械学習システムの検証・開発依頼のための準備ポイントをまとめてみた
nayuta
2022.07.28
FTPコマンドの練習環境を作ってみた
nayuta
2022.07.07
boto3からSQSへのアクセスをmotoでモックしてみる
nayuta
2022.07.04
BigQueryでDELETEとINSERTをスケジューリングして冪等なデータマート作成をしてみた
nayuta
2022.06.27
BigQueryのエクスポート機能で、Cloud Storageのバケットにテーブルのデータをエクスポートしてみた
nayuta
2022.06.22
Athenaのstruct型でオブジェクトの要素が増減したときの読み込みの様子を調べた
nayuta
2022.06.13
DigdagのREST APIを使って指定したプロジェクトのワークフロー名を取得する
nayuta
2022.06.06
PythonでBigQueryにスケジュールされたクエリを一覧・削除してみた
nayuta
2022.05.24
Cloud FunctionsからAmazon SNSを使ってメールを送信する
nayuta
2022.05.23
TensorBoardでXGBoostの学習結果を可視化する
nayuta
2022.05.16
BigQueryで多段ビューのキャッシュの挙動をみてみる
nayuta
2022.05.09
PythonでBigQueryにクエリをスケジューリングしてみた
nayuta
2022.04.25
systemdでEC2の起動時・停止時にコマンドを実行してみる
nayuta
2022.04.25
[データアナリティクス事業本部] 若手Pythonエンジニアとして１年間働いてみました！
nayuta
2022.04.05
データアナリティクス事業本部のビッグデータチームのご紹介
nayuta
2022.04.01
DigdagのREST APIを使って特定のワークフローの最新の実行結果を取得する
nayuta
2022.03.28
EventBridgeとSNSで複数行のメール通知を送る方法をCloudFormationから試してみた
nayuta
2022.03.24
CloudFormationで、Metric Mathを使用してダウンタイムを設定したCloudWatchアラームを作成する
nayuta
2022.03.15
配列をネストしたJSONをJSON SerDeライブラリで読み込んでフラット化してみた
nayuta
2022.03.09
CloudWatchアラームとSNSで日本語の件名・本文のメールを送るためのCloudFormationテンプレートを作ってみた
nayuta
2022.02.24
PlotlyのPython用ライブラリで3Dプロットを試してみた
nayuta
2022.02.16
PlotlyのPython用ライブラリでデータをテーブルで表示してみた
nayuta
2022.02.15
Serverless Frameworkでリトライの調整ができる定期実行なLambda関数を作成する
nayuta
2022.02.03
Athenaで2時点間の時点をランダムに作ってみた
nayuta
2022.01.24
アラームを実行するデータポイントでアラーム状態が短時間だけOK状態に戻る際の誤報を抑制する
nayuta
2022.01.18
SQSのメトリクスから標準キューが空であることを確認してみた
nayuta
2022.01.11
RedshiftのCOPYコマンドでDELIMITERパラメータを指定してみた
nayuta
2022.01.06
Lambdaをスケジュール実行して関数エラーが起きた際の再試行を確認してみた
nayuta
2021.12.21
XGBoostのScikit-Learn APIを機械学習パイプラインと一緒に使ってみた
nayuta
2021.12.14
パーティション射影の列挙型と挿入型の違いについてまとめてみた
nayuta
2021.12.14
AWS Systems Managerのパラメータストアに登録したJSONをシェルから利用する
nayuta
2021.12.02
scikit-learnのextract_patches_2dで画像を小さいパッチに切り出す
nayuta
2021.11.24
[AKIBA.AWS ONLINE #07]Redshift内のデータの活用をAthenaにオフロードしてみた[資料公開]
nayuta
2021.11.24
CVATのアノテーションタスクをほかの人と共有する
nayuta
2021.11.16
CVATに既存のアノテーションをインポートする
nayuta
2021.11.01
Jupyter Docker StacksのイメージにJuliaのパッケージを追加する
nayuta
2021.10.18
JupyterHubのpre_spawn_hookでコンテナ起動前にブートストラップを実行する
nayuta
2021.10.13
JupyterHubのDockerSpawnerで起動するイメージを替える
nayuta
2021.10.12
CloudFormationでSNSトピックへの複数のイベント通知を設定したS3バケットを作成する
nayuta
2021.10.05
scikit-learn 1.0でstableになったHistGradientBoostingClassifierを使ってみる
nayuta
2021.09.27
FeatureUnionを使って機械学習パイプライン内で複数の変換結果を連結する
nayuta
2021.09.24
Amazon Athenaで週次の集計を行う
nayuta
2021.09.13
Julia実行環境として利用できるコンテナイメージ3つを調べてみた
nayuta
2021.09.06
make_column_selectorで型・正規表現からカラムのサブセットを選択する
nayuta
2021.09.06
DictVectorizerで辞書のリストを処理する機械学習パイプラインを作る
nayuta
2021.09.02
ColumnTransformerで特徴ごとに異なる変換を行うパイプラインを構築する
nayuta
2021.08.23
scikit-learnのpipelineモジュールで機械学習パイプラインを作る
nayuta
2021.08.23
plotly.expressパッケージのscatter_mapboxで地図に散布図を描いてみる
nayuta
2021.08.10
Amazon Athenaでカラムの値からJSONを作る
nayuta
2021.08.05
Jupyter Docker Stacksのコンテナをカスタマイズする
nayuta
2021.07.29
JupyterLab環境構築から始めるTerraform
nayuta
2021.07.21
Amazon SNSのrawメッセージ配信設定の違いをCloudFormationで手軽に勉強する
nayuta
2021.07.16
CVATでバウンディングボックスをアノテーションしてみる
nayuta
2021.07.16
AWS Glue DataBrewにYAML形式のレシピファイルをインポートしてみた
nayuta
2021.07.13
AWS Glue DataBrewにレシピをインポートしてみた(AWS CLI編)
nayuta
2021.07.07
AWS CDK(Python)で特定のIPからのみアクセスできるS3バケットを作成してみた
nayuta
2021.07.02
AWS Glue DataBrewにレシピをインポートしてみた(AWSマネジメントコンソール編)
nayuta
2021.07.01
Kinesis Data Analytics Studioでストリーミングデータを可視化してみた
nayuta
2021.06.21