自行编译spark适配CDH 6.3.2_spark2.4 cdh6.3.2 自行编译-CSDN博客

网友收藏2024-01-23 03:07

链接地址：https://chengyanan.blog.csdn.net/article/details/120355741
链接标题：自行编译spark适配CDH 6.3.2_spark2.4 cdh6.3.2 自行编译-CSDN博客
所属网站：chengyanan.blog.csdn.net
被收藏次数：6413

文章浏览阅读2.9k次，点赞2次，收藏17次。我们用的是CDH 6.3.2,内置的spark版本是2.4.0，有两个问题：cdh6之后就取消了spark-sql客户端hudi 0.9.0 仅支持 spark 2.4.4之后的版本所以就想自己安装个spark使用。1.下载spark 3.1.2 版本源码https://spark.apache.org/downloads.html2.修改pom文件增加cloudera maven仓库<repositories> <repository> <_spark2.4 cdh6.3.2 自行编译

本文地址：https://tebull.com/detail/496285.html

标签：spark2.4 cdh6.3.2 自行编译

上一篇：spark-sql 查询报错：Invalid method name: ‘get_table_req‘_invalid method name: 'get_table_req-CSDN博客！

下一篇：hive 解析 jsonArray，且jsonArray数组中的个数未知【json_tuple，lateral view，explode】-CSDN博客

友情链接申请要求：不违法不降权权重相当请联系QQ：737597453