特牛生活网

Spark配置历史服务器_dspark.history.ui.port-CSDN博客

网友收藏
文章浏览阅读1.2k次。由于spark-shell停止掉后,hadoop102:4040页面就看不到历史任务的运行情况,所以开发时都配置历史服务器记录任务运行情况。1)修改spark-default.conf.template名称[mischen@hadoop102 conf]$ mv spark-defaults.conf.template spark-defaults.conf2)修改spark-default.conf文件,配置日志存储路径(写)[atguigu@hadoop102 conf]$ vimsp._dspark.history.ui.port