아파치 스파크 RDD 파티셔닝 편집하기 (부분)

== 파티셔닝을 사용하는 연산 ==
Spark에서 기본적으로 파티션(partitioner)을 생성하거나 파티션을 설정하는 대표적인 연산은 다음과 같다.

# '''sortByKey'''
#* 기본적으로 Range Partitioner를 사용하여 데이터를 정렬하며, 명시적으로 파티션을 생성한다.
#* 결과 RDD는 range-partitioned이다.
# '''groupByKey'''
#* Hash Partitioner를 기본으로 사용하여 키 기준으로 데이터를 그룹화한다.
#* 결과 RDD는 hash-partitioned이다.
# '''reduceByKey'''
#* Hash Partitioner를 기본으로 사용하여 키 기준으로 데이터 값을 줄입니다(aggregate).
#* 결과 RDD는 hash-partitioned입니다.
# '''partitionBy'''
#* 사용자가 지정한 Partitioner (HashPartitioner 또는 RangePartitioner 등)에 따라 명시적으로 파티션을 생성한다.

아래 함수들은 사용 시 기존 파티션이 유지되지 않고 변동이 생긴다.

* map
* flatMap
* union
* join, cogroup 등 다른 RDD와의 결합 연산
* distinct
* sortBy
* repartition

* coalesce