特牛生活网

spark内核揭秘-spark资源调度+任务调度_spark资源调度和任务调度-CSDN博客

网友收藏
文章浏览阅读320次。文章目录简单回顾基本概念术语任务层面的术语任务配置及调度操作层面资源层面资源调度和任务调度详细流程细节把握1.workers集合为什么要是用HashSet集合?2.启动Executor的时候为什么不需要考虑数据的位置,为什么以轮循方式开启executor?3.为什么Spark比MapReduce快?总结简单回顾spark中不管是以client或者是以cluster的方式提交到Standalon..._spark资源调度和任务调度