特牛网址导航

spark streaming 结合kafka 精确消费一次将结果保存到redis_sparkstreaming kafka redis-CSDN博客

网友收藏
文章浏览阅读1k次。spark streaming 结合kafka 精确消费一次到redis1. 环境scala 2.12.12jdk 1.8idea 2020.1maven 3.6.3spark 3.0.1kafka 0.10hadoop 3.2.1hbase 2.2.5 (另外一个明细数据幂等处理,保存到habse)redis 5.0pom<!-- 定义了一些常量 --> <properties> <maven.compiler.source_sparkstreaming kafka redis