何個もSnowball Edgeを注文するの面倒だな
こんにちは、のんピ(@non____97)です。
皆さん何個もSnowball Edgeを注文するの面倒だなと思ったことはありますか? 私はあります。
一般的にデータ転送目的で使用されるSnowball Edgeである、Snowball Edge Storage Optimizedのストレージのサイズは80TBです。
しかし、80TB以上のデータを移行したいとなった場合こちらのSnowball Edgeを複数個注文する必要があります。
加えて、仮に複数個注文できたとしても、オンプレミスのポートの空きや電源容量によっては同時にマウントできるSnowball Edgeの数に制限があることもあります。
そういった点から「1つのSnowball Edgeでより大きいサイズのデータを転送できるようになればいいな...」と密かに願っていました。
その願いが通じたのか、210TBのSnowball Edge Storage Optimizedを注文できるようになりました。
こちらの追加されたSnowball Edgeについて確認してみたので紹介します。
変更点の確認
従来のSnowball Edge Storage Optimizedと比較をしましょう。
| Item | 従来のSnowball Edge Storage Optimized | 210 TBのSnowball Edge Storage Optimized |
|---|---|---|
| CPU | 40 vCPUs (AMD Naples, 32 cores, 3.4Ghz) | 104 vCPUs (AMD Rome, 64 cores, 2 GHz) |
| RAM | 80 GB | 416 GB |
| HDD storage capacity | 80 TB of usable | - |
| NVME storage capacity | - | 210 TB usable (for object and NFS data transfer) |
| SSD storage capacity | 1 TB SATA | None |
| Power | In AWS Regions in the US: NEMA 5–15p 100–220 volts. In all AWS Regions, a power cable is included | In AWS Regions in the US: NEMA 5–15p 100–220 volts. In all AWS Regions, a power cable is included |
| Power consumption | 304 watts for an average use case, though the power supply is rated for 1200 watts. | 304 watts for an average use case, though the power supply is rated for 1200 watts |
| Voltage | 100 – 240V AC | 100 – 240V AC |
| Frequency | 47/63 Hz | 47/63 Hz |
| Data and network connections | 2x 10 Gbit – RJ45 1x 25 Gbit – SFP28 1x 100 Gbit – QSFP28 |
2x 10 Gbit – RJ45 1x 25 Gbit – SFP28 1x 100 Gbit – QSFP28 |
| Cables | Each AWS Snowball Edge device ships country-specific power cables. No other cables or optics are provided. For more information, see Supported Network Hardware. | Each AWS Snowball Edge device ships country-specific power cables. No other cables or optics are provided. For more information, see Supported Network Hardware. |
| Thermal requirements | AWS Snowball Edge devices are designed for office operations, and are ideal for data center operations. | AWS Snowball Edge devices are designed for office operations, and are ideal for data center operations. |
| Decibel output | On average, an AWS Snowball Edge device produces 68 decibels of sound, typically quieter than a vacuum cleaner or living-room music. | On average, an AWS Snowball Edge device produces 68 decibels of sound, typically quieter than a vacuum cleaner or living-room music. |
| Weight | 49.7 pounds (22.54 Kg) | 49.7 pounds (22.45 Kg) |
| Height | 15.5 inches (394 mm) | 15.5 inches (394 mm) |
| Width | 10.6 inches (265 mm) | 10.6 inches (265 mm) |
| Length | 28.3 inches (718 mm) | 28.3 inches (718 mm) |
| Vibration | Non-operational use equivalent to ASTM D4169 Truck level I 0.73 GRMS | Non-operational use equivalent to ASTM D4169 Truck level I 0.73 GRMS |
| Shock | Operational use equivalent to 70G (MIL-S-901) Non-operational use equivalent to 50G (ISTA-3A) |
Operational use equivalent to 70G (MIL-S-901) Non-operational use equivalent to 50G (ISTA-3A) |
| Altitude | Operational use equivalent to 0–3,000 meters (0–10,000 feet) Non-operational use equivalent to 0–12,000 meters |
Operational use equivalent to 0–3,000 meters (0–10,000 feet) Non-operational use equivalent to 0–12,000 meters |
| Temperature range | 0–45°C (operational) | 0–30°C (operational) |
参考 :
- AWS Snowball Edge Device Specifications - AWS Snowball Edge Developer Guide
- AWS Snowball Edge device differences - AWS Snowball Edge Developer Guide
転送用途のストレージが80TBから210TBに増強されただけでなく、HDDからNVMeになっていたり、vCPU、RAMも大幅パワーアップしていたりと従来のSnowball Edge Storage Optimizedとは完全に別のデバイスですね。
Snowball Edge Storage Optimizedがパワーアップしたというよりかは、Snowball Edge Storage Optimizedの種類が増えたと捉えると良いと思います。
また、高温にちょっと弱くなりました。DC内では空調がついているので心配ないと思いますが、検証ルームなど空調が十分に整っていないエリアで使う場合は注意が必要そうです。
ストレージのサイズアップ以外の注目ポイントはストレージのタイプ変更ですね。
転送用途のストレージのタイプがHDDからNVMeに変更されたことにより、従来と比べて転送速度の改善が見込めますね。
With the increased storage capacity and higher performance NVMe drives, customers can now migrate 2PBs of data per month doubling the velocity of large migrations. In addition, customers may also benefit from applying proof-of-concept (POC) credits for AWS assisted PoC evaluation and data migration planning with Snow Large Data Migration Manager. Customers can use Amazon Simple Storage Service (Amazon S3) or NFS protocols to transfer data to the Snowball Edge 210TB devices.
(以下機械翻訳)
ストレージ容量の増加とNVMeドライブの高性能化により、お客様は月間2PBsのデータ移行が可能となり、大規模移行の速度が2倍になります。さらに、お客様は、AWSが支援するPoC評価とSnow Large Data Migration Managerによるデータ移行計画のための概念実証（POC）クレジットの適用も可能です。お客様は、Amazon Simple Storage Service (Amazon S3)またはNFSプロトコルを使用して、Snowball Edge 210TBデバイスにデータを転送することができます。
AWS Snow Family quickens multi-PB data migration with new 210TB device
しかし、細かいファイルが大量にかつディレクトリの階層が深いとプロトコルの処理がボトルネックとなります。その場合はNVMeの恩恵を十分に受けられないので、tarやzipで固めてS3 APIで転送してあげましょう。
抜粋 : 202208_AWS_Black_Belt_AWS_Snowball_Edge_Storage_Optimized P.19
その他にもNVMeのパフォーマンスをフルで発揮するために、「転送元サーバー - 操作端末 - Snowball Egde」を繋ぐネットワークのトラフィックにも注目すると良いでしょう。余裕があるのであれば並列にデータ転送の処理を行うのも良いです。
ペタバイト単位のファイル転送時の構成例がAWS公式ブログで紹介されていました。より速く転送を行いたい場合は参考にすると良いでしょう。
抜粋 : Snowball Edge を使用したデータ移行のベストプラクティス | Amazon Web Services ブログ
パフォーマンス改善のポイントは以下AWS公式ドキュメントにも記載されています。
使用できるリージョン
2023/6/1時点で使用可能なリージョンは以下2つです。
- us-east-1 (バージニア北部)
- us-west-2 (オレゴン)
東京リージョンはまだです。正座して待ちましょう。
お値段
お値段について確認します。
Snowball Edgeの料金ページを確認すると、「AWSセールスサポートにお問い合わせください」と書いてあり、料金表に具体的な金額は記載ありませんでした。
To learn about pricing for Snowball Edge Storage Optimized 210TB device for data transfer and to order a device contact AWS Sales support.
vCPU数、RAMのサイズが近いGPU付きのSnowball Edge Compute Optimizedの東京リージョン価格が$2,000なので、同程度か、それ以上するのではないかと予想します。
注文しようとしてみる
試しに注文しようとしてみます。リージョンはus-east-1です。
はい、210TBのSnowball Edge Storage Optimizedがデバイス一覧にありません。
What's Newをよくよく見てみると、「デバイスを注文するにはAWSアカウントチーム、またはAWSセールスサポートにお問い合わせください」と記載されていました。
To order a device contact your AWS Account team, or AWS Sales support.
AWS Snow Family quickens multi-PB data migration with new 210TB device
注文できず。残念。
Snowball Edgeを使ってより高速にデータ転送を完了させたい場合に役立ちそう
210TBのSnowball Edge Storage Optimizedを注文できるようになったアップデートを紹介しました。
Snowball Edgeを使ってより高速にデータ転送を完了させたい場合に役立ちそうですね。
ただし、ハードウェア的に強力になっても上手く使いこなせなければ勿体ないです。Snowball Edgeを使ったデータ転送をする前にどのような準備が必要か、データ転送完了までのフローをある程度考えた上で、実現したいこととマッチしている場合に注文すると良いでしょう。
以下にSnowball Edgeを使うにあたって参考になる動画を紹介します。
この記事が誰かの助けになれば幸いです。
以上、AWS事業本部 コンサルティング部の のんピ(@non____97)でした!
37
