Spark学习之路——5.Spark UI_sparkui查看固定job的执行情况-CSDN博客

网友收藏2024-01-23 02:45

链接地址：https://blog.csdn.net/hehe_soft_engineer/article/details/104124268
链接标题：Spark学习之路——5.Spark UI_sparkui查看固定job的执行情况-CSDN博客
所属网站：blog.csdn.net
被收藏次数：5223

文章浏览阅读297次。一、Spark UI解读Jobs页面可以看到所有Jobs的执行情况，job的数量取决于action算子的数量。Stages页面列出所有Stage的执行情况。Spark stage切分是按照宽依赖来区分的，因此粒度上要比job更细一些。Storage页面显示所做的cache persist等操作。Environment页面里面展示了当前spark所依赖的环境，比如jdk，lib等等..._sparkui查看固定job的执行情况

本文地址：https://tebull.com/detail/495764.html

标签：sparkui查看固定job的执行情况