하둡

From IT Wiki
Revision as of 18:04, 2 January 2020 by 보안기사 (talk | contribs)
Hadoop
  • 일반 컴퓨터로 가상화된 대형 스토리지 형성
  • 그 안에 보관된 거대한 데이터 세트를 병렬로 처리할 수 있도록 빅데이터 분산처리를 돕는 자바 오픈 소스 소프트웨어 프레임워크

하둡 에코시스템

하둡 에코시스템.png

하둡 코어 프로젝트(HDFS, MapReduce)와 하둡 서브 프로젝트(수집, 분석, 마이닝 등)로 구성

Zookeeper(주키퍼)

Oozie(우지)

Avro(에이브로)

Parquet(파케이)

Flume(플룸)

Sqoop(스쿱)

Pig(피그)

Crunch(크런치)

HBase

Hive(하이브)

Impala

Tajo

참조 문헌