特牛网址导航

Spark Web UI 监控_spark监控界面-CSDN博客

网友收藏
文章浏览阅读2.5w次,点赞17次,收藏73次。日常铺垫本人最终用于大数据集测试的集群中包含4个节点,每个节点是一个worker,每个worker上启动一个Executor,其中Driver也跑在master上。每个Executor可使用的核数为2,可用的内存为2g,集群中所有Executor最大可用核数为8。 conf/spark-defaults.conf 部分参数配置如下: spark.master ..._spark监控界面