特牛网址导航

数据湖使用分享_数据湖怎么用-CSDN博客

网友收藏
文章浏览阅读596次。1 引入背景:目前我们实时接入binlog,用的是kudu,但kudu对大事务支持不好,关键成本比较高,大数据加胜同学建议尝试数据湖,从而开始了数据湖的探索。后续与培殿同学一直配合跟进数据湖,发掘出数据湖更多功能,用于生产。2 数据湖基本概念本质来讲,数据湖是一个关于存储的设计模式2.1 数据湖基础概念snapshotsnapshot是iceberg比较重要的概念。Iceberg 基于MVCC(Multi-Version Concurrency Control)设计,每次commit.._数据湖怎么用