익명 사용자
로그인하지 않음
토론
기여
계정 만들기
로그인
IT 위키
검색
아파치 스파크 셔플링
편집하기 (부분)
IT 위키
이름공간
문서
토론
더 보기
더 보기
문서 행위
읽기
편집
원본 편집
역사
경고:
로그인하지 않았습니다. 편집을 하면 IP 주소가 공개되게 됩니다.
로그인
하거나
계정을 생성하면
편집자가 사용자 이름으로 기록되고, 다른 장점도 있습니다.
스팸 방지 검사입니다. 이것을 입력하지
마세요
!
==셔플링의 장점과 단점== *장점 (용도) **데이터를 효율적으로 재분배하여 각 파티션에서 병렬 처리가 가능해진다. **여러 파티션에 걸쳐 분산된 데이터를 집합하거나 정렬할 수 있다. *단점 (문제점) **셔플링은 네트워크 I/O를 발생시키며, 이는 성능을 저하시킬 수 있다. **디스크 I/O와 네트워크 대역폭을 많이 소비하므로, 셔플링이 많으면 성능이 크게 떨어질 수 있다. **셔플링은 데이터 크기에 비례하여 비용이 커지기 때문에, 대규모 데이터셋에서의 셔플링은 매우 비용이 많이 들 수 있다.
요약:
IT 위키에서의 모든 기여는 크리에이티브 커먼즈 저작자표시-비영리-동일조건변경허락 라이선스로 배포된다는 점을 유의해 주세요(자세한 내용에 대해서는
IT 위키:저작권
문서를 읽어주세요). 만약 여기에 동의하지 않는다면 문서를 저장하지 말아 주세요.
또한, 직접 작성했거나 퍼블릭 도메인과 같은 자유 문서에서 가져왔다는 것을 보증해야 합니다.
저작권이 있는 내용을 허가 없이 저장하지 마세요!
취소
편집 도움말
(새 창에서 열림)
둘러보기
둘러보기
대문
최근 바뀜
광고
위키 도구
위키 도구
특수 문서 목록
문서 도구
문서 도구
사용자 문서 도구
더 보기
여기를 가리키는 문서
가리키는 글의 최근 바뀜
문서 정보
문서 기록