特牛网址导航

【Flink】随机前缀解决数据倾斜_flink key用随机数-CSDN博客

网友收藏
文章浏览阅读353次。Source如果是多并行度,其采用的是轮询;KeyBy数据倾斜:BroadCast或者Custom广播适合join场景自定义适合groupby场景rebalancerebalance 将数据发往下游所有并行度rescale自定义分区器 //自定义分区器 泛型是key 返回值是分区号 source.partitionCustom(new Partitioner<String>() { @Override ._flink key用随机数