practice-daily-etl
SPARK / DAILY_ETL / on failure: CANCEL_AND_WAIT
Analytics / EMR
Amazon EMR
Primary・Core・Taskノードと、Spark/Hiveステップの障害動作を練習します。
クラスター / ノード
1 / 6
ステップ
1
処理済み
64.0 GiB
Primary
クラスター管理とジョブ調整を担当します。
Core
処理に加えてHDFSの永続データを保持します。
Task
処理専用で、伸縮やSpot利用に向きます。
practice-spark-cluster
WAITINGEMR_7_LATEST / SPARK, HIVE / INSTANCE_FLEET
- Primary
- 1
- Core
- 3
- Task
- 2
- 購入
- MIXED
- ログ
- s3://console-lab-assets
COMPLETED