- 链接地址:https://blog.csdn.net/m0_59358648/article/details/121511081
- 链接标题:「Spark 从精通到重新入门(一)」Spark 中不可不知的动态优化_saprk 动态优化-CSDN博客
- 所属网站:blog.csdn.net
- 被收藏次数:539
文章浏览阅读7.4k次。前言Apache Spark 自 2010 年面世,到现在已经发展为大数据批计算的首选引擎。而在 2020 年 6 月份发布的Spark 3.0 版本也是 Spark 有史以来最大的 Release,其中将近一半的 issue 都属于 SparkSQL。这也迎合我们现在的主要场景(90% 是 SQL),同时也是优化痛点和主要功能点。我们 Erda 的 FDP 平台(Fast Data Platform)也从 Spark 2.4 升级到 Spark 3.0 并做了一系列的相关优化,本文将主要结合 Spar._saprk 动态优化
版权声明:本文发布于特牛生活网 内容均来源于互联网 如有侵权联系删除
标签:saprk 动态优化