158、Spark内核原理进阶之sortByKey算子内部实现原

2019-01-24  本文已影响0人  ZFH__ZJ
sortByKey.png

sortByKey

  1. ShuffledRDD,做shuffle read,将相同的key拉到一个partition中来
  2. mapPartitions,对每个partitions内的key进行全局的排序
上一篇 下一篇

猜你喜欢

热点阅读