하둡 에코시스템
IT 위키
┌────────────────────────────┐ │ User Interface │ │ (Hue, Zeppelin) │ └────────────┬───────────────┘ │ ┌──────────────────▼────────────────────┐ │ Processing / Compute Layer │ │ (MapReduce, Spark, Tez, Flink, Storm)│ └──────────────────┬────────────────────┘ │ ┌──────────────────▼────────────────────┐ │ Resource Management Layer │ │ (YARN, Mesos) │ └──────────────────┬────────────────────┘ │ ┌──────────────────▼────────────────────┐ │ Storage Layer (HDFS, HBase) │ │ + External: S3, Cassandra, Alluxio │ └──────────────────┬────────────────────┘ │ ┌──────────────────▼────────────────────┐ │ Data Ingestion / ETL Layer │ │ (Flume, Sqoop, Kafka, NiFi, Oozie) │ └──────────────────┬────────────────────┘ │ ┌──────────────────▼────────────────────┐ │ Metadata / Coordination Layer │ │ (ZooKeeper, Atlas, Ranger) │ └───────────────────────────────────────┘