Amazon FSx for Lustre
File system tốc độ cao cho HPC
File system Lustre được quản lý cho throughput rất cao và độ trễ thấp; liên kết được với S3 bucket để đọc dữ liệu như file và ghi kết quả ngược lại S3.
- Chi phí$$ Vừa phải
- Độ khó●●●●●
- Để không có tốn tiền?Có
- AWS quản lý
- Có trong đềSAA
Hình dungNhư đường cao tốc nhiều làn dẫn thẳng từ kho nguyên liệu tới dây chuyền máy.
Khi nào nên dùng
✓ Nên dùng khi
HPC, huấn luyện ML, render, phân tích gen cần đọc dữ liệu cực nhanh song song.
✗ Không nên dùng khi
File share dùng chung thông thường → EFS; file share Windows → FSx for Windows File Server.
Ví dụ hay gặp
- Huấn luyện ML đọc dataset từ S3
- Mô phỏng HPC bằng ParallelCluster
- Render phim, xử lý video
Tốn bao nhiêu tiền?
- Cách tính: Tính theo dung lượng và mức throughput cấp phát (khác nhau giữa scratch và persistent), cộng backup.
⚠️ Bẫy chi phí
Scratch rẻ hơn nhưng không sao chép dữ liệu, hỏng là mất; giữ file system persistent khi không dùng vẫn tốn tiền.
