spark-shuffle阶段详细描述_shuffle中的段-CSDN博客文章浏览阅读612次。spark的shuffle流程1.shuffle发生在宽依赖算子划分阶段的时候,但是宽依赖算子不一定发生shuffle2.shuffle分为两个阶段,一个是shuffle-write,另一个是shuffle-read3.在shuffle-执行write时,我们要可以选择一个分区器,比...... admin2024-01-24