特牛生活网

大规模 Hadoop 升级在 Pinterest 的实践 – 过往记忆

网友收藏
Monarch 是 Pinterest 的批处理平台，由30多个 Hadoop YARN 集群组成，其中17k+节点完全建立在 AWS EC2 之上。2021年初，Monarch 还在使用五年前的 Hadoop 2.7.1。由于同步社区分支（特性和bug修复）的复杂性不断增加，我们决定是时候进行版本升级了。我们最终选择了Hadoop 2.10.0，这是当时 Hadoop 2 的最新版本。 本文分享 Pinterest 将 Monarc
版权声明：本文发布于特牛生活网 内容均来源于互联网 如有侵权联系删除
标签：Hadoop Hadoop 过往记忆 大数据技术博客 大数据技术 Hadoop视频教程 Hadoop Hive HBase Spark Flink Flume Strom Zookeeper Mapreduce HDFS YARN Guava Delta Lake Hudi Iceberg 大数据 海量数据处理 数据湖

上一篇：Velox 介绍：一个开源的统一执行引擎 – 过往记忆！

下一篇：大规模 Hadoop 升级在 Pinterest 的实践 – 过往记忆

相关文章

友情链接申请要求： 不违法不降权 权重相当 请联系QQ：737597453