特牛网址导航

spark远程debug之调试spark on yarn 程序(基于CDH平台,1.6.0版本)_cdh spark1.6-CSDN博客

网友收藏
文章浏览阅读4.9k次。简介 由于spark有多种运行模式,远程调试的时候,虽然大体步骤相同,但是还是有小部分需要注意的地方,这里记录一下调试运行在spark on yarn模式下的程序。环境准备 需要完好的Hadoop,spark集群,以便于提交spark on yarn程序。我这里是基于CDH的环境 步骤 1.随_cdh spark1.6
标签:cdh spark1.6