데이터 파이프라인: Difference between revisions
From IT Wiki
(새 문서: 분류:데이터 분석 ;데이터의 흐름, 그 흐름 과정에서 이루어지는 전방위적 처리과정을 수행하는 시스템, 또는 매커니즘 == 특징 == * 병...) |
No edit summary |
||
Line 4: | Line 4: | ||
== 특징 == | == 특징 == | ||
* 병렬 처리 | * 병렬 처리 | ||
* 대규모 및 실시간 | |||
* 자동화 | * 자동화 | ||
Revision as of 11:07, 8 January 2020
- 데이터의 흐름, 그 흐름 과정에서 이루어지는 전방위적 처리과정을 수행하는 시스템, 또는 매커니즘
특징
- 병렬 처리
- 대규모 및 실시간
- 자동화
수행 기능
- 추출(extracting)
- 변경(transforming)
- 결합(combining)
- 검증(validating)
- 적재(loading)
ETL과의 차이
- 데이터 파이프라인은 ETL을 서브셋으로 포함하는 광범위한 용어