整理spark中的job stage task几个概念以及运行案例_spark中job的概念-CSDN博客

网友收藏2024-01-23 06:49

链接地址：https://blog.csdn.net/shenxiaoming77/article/details/78501565
链接标题：整理spark中的job stage task几个概念以及运行案例_spark中job的概念-CSDN博客
所属网站：blog.csdn.net
被收藏次数：6410

文章浏览阅读4.6k次。Job ：是一个比task 和 stage 更大的逻辑概念，job 可以认为是我们在driver 或是通过spark-submit 提交的程序中一个action ，在我们的程序中有很多action 所有也就对应很多的jobsStage：是spark 中一个非常重要的概念，在一个job 中划分stage 的一个重要依据是否有shuflle 发生，也就是是否_spark中job的概念

本文地址：https://tebull.com/detail/502912.html

标签：spark中job的概念