特牛网址导航

Spark Core 的核心使用_spark core实现groupbykeyandsortbybvalue-CSDN博客

网友收藏
文章浏览阅读1.2k次。Spark 程序核心概念 * 首先,官网的这张图很好的描述了一个Spark 应用程序的结构,一个Spark应用程序由一个Driver端和多个Executor组成,多个task 以多线程的形式运行在Executor中。 * Driver端: Driver负责运行程序的main()方法,负责将代码发送到各个Executor去执行,然后取回结果,Driver端也是以Executor方式运行,可以..._spark core实现groupbykeyandsortbybvalue