하둡 에코시스템
IT 위키
┌────────────────────────────┐
│ User Interface │
│ (Hue, Zeppelin) │
└────────────┬───────────────┘
│
┌──────────────────▼────────────────────┐
│ Processing / Compute Layer │
│ (MapReduce, Spark, Tez, Flink, Storm)│
└──────────────────┬────────────────────┘
│
┌──────────────────▼────────────────────┐
│ Resource Management Layer │
│ (YARN, Mesos) │
└──────────────────┬────────────────────┘
│
┌──────────────────▼────────────────────┐
│ Storage Layer (HDFS, HBase) │
│ + External: S3, Cassandra, Alluxio │
└──────────────────┬────────────────────┘
│
┌──────────────────▼────────────────────┐
│ Data Ingestion / ETL Layer │
│ (Flume, Sqoop, Kafka, NiFi, Oozie) │
└──────────────────┬────────────────────┘
│
┌──────────────────▼────────────────────┐
│ Metadata / Coordination Layer │
│ (ZooKeeper, Atlas, Ranger) │
└───────────────────────────────────────┘