特牛网址导航

Flink实时数仓DWM层支付宽表设计_flink两张表如何打宽-CSDN博客

网友收藏
文章浏览阅读782次。Flink实时数仓DWM层支付宽表设计需求分析与思路支付宽表的目的,最主要的原因是支付表没有到订单明细,支付金额没有细分到商品上,没有办法统计商品级的支付状况。所以支付宽表的核心就是要把支付表的信息与订单明细关联上。解决方案有两个一个是把订单明细表(或者宽表)输出到Hbase上,在支付宽表计算时查询hbase,这相当于把订单明细作为一种维度进行管理。一个是用流的方式接收订单明细,然后用双流join方式进行合并。因为订单与支付产生有一定的时差。所以必须用intervalJoin来管理流的状态时间_flink两张表如何打宽