- 链接地址:https://blog.csdn.net/qq_43278189/article/details/121110878
- 链接标题:Spark面试_处理过程中用的dataframe还是直接写的sql-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:8105
文章浏览阅读199次。文章目录Spark面试八股文1. Spark 的运行流程?1. Spark 的运行流程?Spark运行流程具体运行流程如下:1. SparkContext 向资源管理器注册并向资源管理器申请运行 Executor2. 资源管理器分配 Executor,然后资源管理器启动 Executor3. Executor 发送心跳至资源管理器4. SparkContext 构建 DAG 有向无环图5. 将 DAG 分解成 Stage(TaskSet)_处理过程中用的dataframe还是直接写的sql
版权声明:本文发布于特牛网址导航 内容均来源于互联网 如有侵权联系删除