特牛生活网

cdh hive on spark_CDH集群提交Spark作业原理及过程分析-CSDN博客

网友收藏
文章浏览阅读342次。目的刚入门Spark,安装的是CDH自带的版本,版本号spark-core_2.11-2.4.0-cdh6.2.1,部署了cdh客户端(非集群节点),本文主要以spark-shell为例子,对在cdh客户端上提交spark作业原理和过程进行简单分析,加深理解。spark-shell执行在CDH客户端启动spark-shell后,可以发下yarn集群上启动了一个作业,实际上,cdh-spa..._cdh hive on spark 只在一台节点上运行怎么回事