아파치 스파크 RDD 편집하기 (부분)

==parallelize의 파티션 개수 지정==
기본적으로 Spark는 클러스터의 설정에 따라 자동으로 적절한 파티션 개수를 결정하지만, 사용자가 직접 지정할 수도 있다.<syntaxhighlight lang="scala">
val rddWithPartitions = sc.parallelize(data, numSlices = 3)
println(s"Number of Partitions: ${rddWithPartitions.getNumPartitions}")

// 출력 결과
// Number of Partitions: 3
</syntaxhighlight>파티션을 설정하면 Spark가 데이터를 여러 작업 노드에 나누어 병렬 처리할 수 있도록 도와준다.