特牛网址导航

Spark面试_处理过程中用的dataframe还是直接写的sql-CSDN博客

网友收藏
文章浏览阅读199次。文章目录Spark面试八股文1. Spark 的运行流程?1. Spark 的运行流程?Spark运行流程具体运行流程如下:1. SparkContext 向资源管理器注册并向资源管理器申请运行 Executor2. 资源管理器分配 Executor,然后资源管理器启动 Executor3. Executor 发送心跳至资源管理器4. SparkContext 构建 DAG 有向无环图5. 将 DAG 分解成 Stage(TaskSet)_处理过程中用的dataframe还是直接写的sql