[レポート]Automate operations management on AWS #COP310-R #reinvent

こんにちは、ヌヌです!

本記事は、re:Invent2022のセッション Automate operations management on AWS の参加レポートです。

ワークショップの概要

In this workshop you will automate three common daily operations tasks by using AWS services (DRS agent deployment and testing of failover, detecting and handling unattached EBS volumes, and finding instance that were launched from an unauthorized AMI)

• EC2コンソル画面　→　「Tags」カテゴリへ移動します。
• タグをつける対象のインスタンスを選択します。
• Key: DRS, Value: true　タグをつけます。

フェールオーバー検証からコマンドを実行（コピー/貼り付け）します。

• failover-validation.txt

ファイルは、このインスタンスのDNSレコードを更新するためにSSHセッション内の砦のデスクトップにあります。

ADDR=`hostname -I`
HOST=`hostname`
sudo touch /tmp/nsupdate.txt
sudo chmod 666 /tmp/nsupdate.txt
echo "server dns.onpremsim.env" > /tmp/nsupdate.txt
echo "update delete $HOST A" >> /tmp/nsupdate.txt
echo "update add $HOST 86400 A $ADDR" >> /tmp/nsupdate.txt
echo "update delete $HOST PTR" >> /tmp/nsupdate.txt
echo "update add $HOST 86400 PTR $ADDR" >> /tmp/nsupdate.txt
echo "send" >> /tmp/nsupdate.txt
sudo nsupdate /tmp/nsupdate.txt

Part 2 - Deletion of unused Amazon Elastic Block Store volumes

アーキテクチャ

Step 1. Create an Amazon SNS topic

• ステンダードのSNSトピックを作成します。

Step 2. Create an IAM role for the Lambda function execution

サービス：Lambda ポリシー：

{
"Version": "2012-10-17",
"Statement": [
{
"Sid": "VisualEditor0",
"Effect": "Allow",
"Action": [
"cloudtrail:LookupEvents",
"cloudtrail:StartLogging",
"cloudtrail:GetTrailStatus",
"logs:CreateLogGroup",
"logs:PutLogEvents",
"ssm:CreateOpsItem",
"cloudtrail:DescribeTrails",
"ec2:DescribeVolumeAttribute",
"logs:CreateLogStream",
"sns:Publish",
"ec2:DescribeVolumeStatus",
"cloudtrail:CreateTrail",
"ec2:DescribeVolumes"
],
"Resource": "*"
}
]
}

Step 3. Create the Lambda function configuration

下記のような設定のLambda関数の設定を作成します。

• Author from scratch
• runtime: Python 3.7
• Architecture: x86_64
• Handler Update: “opsCenterAgedEBSVolumeFinder.lambda_handler

Step 4. Create the Lambda function

下記のコードのLambda関数を作成します。

import json
import itertools
from datetime import datetime, timedelta
import os, os.path, sys
import boto3
import botocore
from botocore.exceptions import ClientError

Step 5. Usage Notes

environment variables

EC2またはローカルにCloudTrailログを検査して使用しないボリュームを識別するコードのファイルを作成

• ファイル名：opsCenterAgedEBSVolumeFinder.py

続いて同ディレクトリで requirements.txt ファイル作成

// requirements.txt
boto3==1.26.1
botocore==1.29.1
awscli==1.27.1

同ディレクトリでboto3, botocore, awscli パッケージのローカルコピーを作成します。

• コマンド: pip install --upgrade -r requirements.txt -t .

Lambda関数のディレクトリで下記のコマンドを実行します。

• zip -r9 ../opsCenterAgedEBSVolumeFinder.zip .

cliで既存の関数をアップデートしパッケージをアップロードします。

Step 6. test function

Step 7. Review the OpsItem

• SSMコンソル画面　→　OpsCenterへ移動します。
• 検出された使用しないEBSを確認します。
• リソースを選択し、Run Automationで設定しておいた自動化を始めます。

Step 8. Schedule the Lambda function

Event Bridgeを利用してLambdaを定義的に実行するイベントを作成します。

まとめ

時間不足でPart3のワークショップへ進めなかったことが残念でした。AWS DRSというサービスは初めて接してみましたが、自動的なDR対象ができることはすごく便利だと思いました。そして、今回はLambdaを利用して使用しないEBSだけ検出してみましたが、他の無駄のリソースを検出できるとすることも可能に見えました。今後挑戦してみたいですね。