特牛网址导航

Spark调研笔记第5篇 - Spark API简介-CSDN博客

网友收藏
文章浏览阅读1.6k次。由于Spark是用Scala实现的,所以Spark天生支持Scala API,此外,还支持Java和Python API。以Spark 1.3版本的Python API为例,其模块层级关系如下图所示:从上图可知,pyspark是Python API的顶层package,它包含了几个重要的subpackages,其中:1) pyspark.SparkContext它抽象了指向sp