特牛网址导航

Spark应用程序运行的日志存在哪里(转)-CSDN博客

网友收藏
文章浏览阅读761次。原文链接:Spark应用程序运行的日志存在哪里在很多情况下,我们需要查看driver和executors在运行Spark应用程序时候产生的日志,这些日志对于我们调试和查找问题是很重要的。  Spark日志确切的存放路径和部署模式相关:  (1)、如果是Spark Standalone模式,我们可以直接在Master UI界面查看应用程序的日志,在默认情况下这些日志是存储在worker节点的..._如何下载 spark tasks的日志