Amazon FSx for Lustre
HPC向け高速ファイルシステム
非常に高いthroughputと低レイテンシーを実現するマネージドLustreファイルシステムです。S3 bucketと連携して、データをファイルとして読み込み、結果をS3に書き戻せます。
- コスト$$ ふつう
- 難易度●●●●●
- 未使用でも課金?はい
- AWS マネージド
- 出題試験SAA
たとえるなら原材料倉庫から製造ラインへ直結する多車線の高速道路のようなものです。
いつ使う?
✓ 使うべき場面
HPC、ML学習、レンダリング、ゲノム解析など、データを並列で超高速に読む必要があるとき。
✗ 避けるべき場面
通常の共有ファイル → EFS。Windowsファイル共有 → FSx for Windows File Server。
よくある使い方
- S3のデータセットを読むML学習
- ParallelClusterによるHPCシミュレーション
- 映画のレンダリング、動画処理
料金はいくら?
- 課金方式: プロビジョニングした容量とthroughputレベル(scratchとpersistentで異なる)で課金され、バックアップ料金が加わります。
⚠️ 料金の落とし穴
Scratchは安価ですがデータを複製しないため、障害時には失われます。使わないpersistentファイルシステムを残しておくと料金がかかり続けます。