AWS Data Pipeline
Điều phối ETL đời cũ
Đóng với khách hàng mới từ 07/2024; nên dùng Glue, Step Functions hoặc MWAA. Data Pipeline định nghĩa luồng di chuyển và xử lý dữ liệu theo lịch giữa S3, RDS, DynamoDB, EMR… và chạy trên EC2/EMR do nó tạo.
- Chi phí$ Rẻ
- Độ khó●●●●●
- Để không có tốn tiền?Ít
- AWS quản lý
⚠️ Dịch vụ đã ngừng hoặc sắp ngừng
Mở Data Pipeline trên bản đồ →
Đóng với khách hàng mới từ 07/2024; dùng Glue / Step Functions / MWAA
Hình dungNhư băng chuyền nhà máy cũ: vẫn chạy cho xưởng đang dùng, nhưng xưởng mới lắp dây chuyền hiện đại hơn.
Khi nào nên dùng
✓ Nên dùng khi
Chỉ khi duy trì pipeline cũ trong lúc chờ chuyển đổi.
✗ Không nên dùng khi
Mọi luồng dữ liệu mới → Glue / Step Functions / Managed Workflows for Apache Airflow.
Ví dụ hay gặp
- Duy trì job sao lưu DynamoDB sang S3 cũ
- Lên kế hoạch di chuyển sang Glue hoặc MWAA
Tốn bao nhiêu tiền?
- Cách tính: Tính theo số activity/precondition được lên lịch mỗi tháng, cộng EC2/EMR mà pipeline khởi chạy.
⚠️ Bẫy chi phí
Tài nguyên EC2/EMR do pipeline tạo nếu không tự tắt sẽ tiếp tục tính tiền.
