플럼: Difference between revisions
From IT Wiki
m (문자열 찾아 바꾸기 - "분류:데이터/통계학" 문자열을 "분류:데이터 과학" 문자열로) |
|||
(2 intermediate revisions by 2 users not shown) | |||
Line 1: | Line 1: | ||
[[분류:데이터 | [[분류:데이터 과학]] | ||
;Flume | ;Flume | ||
;연속적으로 생성되는 데이터스트림을 수집 및 전송하여 [[HDFS]]에 저장할 수 있는 도구 | ;연속적으로 생성되는 데이터스트림을 수집 및 전송하여 [[HDFS]]에 저장할 수 있는 도구 | ||
Line 16: | Line 16: | ||
| 채널(Channel) || 소스와 싱크 간에 데이터를 받는 통로 | | 채널(Channel) || 소스와 싱크 간에 데이터를 받는 통로 | ||
|} | |} | ||
== 구성 방법 == | |||
* 1소스 1채널 1싱크 | |||
* 멀티 에이전트 플로우 구성 | |||
* 멀티 에이전트 통합 구성 | |||
* 멀티플렉싱 플로우 구성 | |||
== 참고 문헌 == | == 참고 문헌 == | ||
* 구자환 교수님 강의자료 | * 구자환 교수님 강의자료 |
Latest revision as of 00:31, 7 May 2020
- Flume
- 연속적으로 생성되는 데이터스트림을 수집 및 전송하여 HDFS에 저장할 수 있는 도구
구성 요소[edit | edit source]
구성 요소 | 설명 |
---|---|
소스(Source) | 외부 데이터 소스에 설치되는 에이전트 |
싱크(Sink) | 데이터 목적지에 설치되는 에이전트 |
채널(Channel) | 소스와 싱크 간에 데이터를 받는 통로 |
구성 방법[edit | edit source]
- 1소스 1채널 1싱크
- 멀티 에이전트 플로우 구성
- 멀티 에이전트 통합 구성
- 멀티플렉싱 플로우 구성
참고 문헌[edit | edit source]
- 구자환 교수님 강의자료