하둡

IT 위키
보안기사 (토론 | 기여)님의 2020년 1월 2일 (목) 18:04 판
Hadoop
  • 일반 컴퓨터로 가상화된 대형 스토리지 형성
  • 그 안에 보관된 거대한 데이터 세트를 병렬로 처리할 수 있도록 빅데이터 분산처리를 돕는 자바 오픈 소스 소프트웨어 프레임워크

1 하둡 에코시스템

하둡 에코시스템.png

하둡 코어 프로젝트(HDFS, MapReduce)와 하둡 서브 프로젝트(수집, 분석, 마이닝 등)로 구성

1.1 Zookeeper(주키퍼)

1.2 Oozie(우지)

1.3 Avro(에이브로)

1.4 Parquet(파케이)

1.5 Flume(플룸)

1.6 Sqoop(스쿱)

1.7 Pig(피그)

1.8 Crunch(크런치)

1.9 HBase

1.10 Hive(하이브)

1.11 Impala

1.12 Tajo

2 참조 문헌

원본 주소 "https://itwiki.kr/index.php?title=하둡&oldid=6137"