コスト削減の具体的な手順が学べるワークショップ「Continuous cost and sustainability optimization」に参加しました #AWSreInvent

AWS re:Invent 2023

#Amazon EBS

#Amazon S3

#AWS

yhana

2023.12.01

この記事は公開されてから1年以上経過しています。情報が古い可能性がありますので、ご注意ください。

re:Invent 2023 において、Amazon EC2, EBS, EFS, S3 といった主要なサービスに関する多様なコスト削減方法を学べるワークショップ「Continuous cost and sustainability optimization」に参加してきました。

ワークショップ概要

タイトル

Continuous cost and sustainability optimization

概要

In this workshop, learn best practices for cost and sustainability optimization. Shift costs and sustainability responsibilities from the Cloud Center of Excellence (CCoE) to end users and application owners aided by automation and monitoring at scale. Explore how to use AWS services designed to optimize your infrastructure and your workloads with the aid of AI/ML algorithms to detect anomalies. Building upon real-world use cases, learn about cost efficiency implementing mechanisms that empower application owners to have clear, actionable tasks for cost and sustainability optimization. You must bring your laptop to participate.

SPEAKERS

Francesc Sala

Enrico Bonaccorsi

LEVEL

300

学んだこと

EBS, EC2, EFS, S3 といった主要な AWS サービスのコスト削減方法や考え方について学びました。

その中で、特にためになったのは EBS を gp2 → gp3 に変更する際の IOPS とスループットの確認方法です。

gp3 では IOPS とスループットを設定で変更できるため、どのように適正な値を算出するのか気になっていたのですが、ワークショップ中では次の方法で考えられており、今後の検討時の参考になりました（必ずしもこの方法が正しいわけではない認識です）。

Amazon CloudWatch で EBS メトリクスを確認
- IOPS はVolumeWriteOps, VolumeReadOpsから算出（加算した値を期間で乗算）
- スループットはVolumeWriteBytes, VolumeReadBytesから算出（加算した値を期間で乗算）
スパイクが発生している部分の IOPS、スループットに 20% のマージンを追加した値で gp3 に変更

もう一つ、S3 の不完全なマルチパートアップロードのオブジェクト数を確認して削除する方法もためになりました。Strage Lens の「上位 N の概要」から確認できることを知りませんでした。

もし不完全なマルチパートアップロードのオブジェクトが存在する場合は、ライフサイクルルールを利用して削除できます。ワークショップでの設定内容を下記に示します。

いずれも具体的な手順として用意されていたので、自身のアカウントで実施するイメージが湧きました。

ワークショップの内容

参加者は CCoE の一員である想定で行われるワークショップであり、次の AWS サービスに関するコスト削減を実施していきます。手順がすべて用意されていました。

AWS CloudTrail
- 不要な証跡の削除
Amazon EBS
- gp2 から gp3 への移行
- スナップショットのライフサイクル管理
Amazon EC2
- インスタンスの自動起動・停止
- 適切なサイジング
- Graviton への移行
Amazon EFS
- 階層化
Amazon S3
- 不完全なマルチパートアップロードオブジェクトの削除
- S3 Intelligent-Tiering の利用
Amazon Athena
- Parquet の利用による圧縮率の改善
AWS Lambda
- Graviton への移行
Amazon SageMakaer
- アイドル状態の SageMaker インスタンスの自動停止
Amazon RDS
- Graviton への移行

各内容はコスト削減に対する次の 4 つのキーコンセプトに沿った内容になっています。

リサイズ
スケジューリング
ライフサイクルポリシー
エネルギー効率

4 つめのエネルギー効率は印象に残っており、削減策の最後に「エネルギー消費量が ◯ % 低減した」といった情報がありました。これまで、あまり意識したことがなかったことでした。

ワークショップで用意されている AWS アカウントでは、事前に EC2 インスタンスや S3 などのリソースが作成済みであり、それらのリソースに対してコスト削減策を順番に実施していきます。時間は 120 分（最初の 10 分は説明）だったのですが、半分も終わらせることはできませんでした。それくらい濃厚な内容でした。