特牛生活网

Spark Streaming详解以及自定义数据源详解_sparkstreaming支持用户自定义数据源,但暂不支持__语言。 a: java-CSDN博客

网友收藏
  • 链接地址:https://chengyanan.blog.csdn.net/article/details/88591311
  • 链接标题:Spark Streaming详解以及自定义数据源详解_sparkstreaming支持用户自定义数据源,但暂不支持__语言。 a: java-CSDN博客
  • 所属网站:chengyanan.blog.csdn.net
  • 被收藏次数:8311
文章浏览阅读2.7k次。1.Spark Streaming是什么Spark Streaming用于流式数据的处理,SparkStreaming支持的数据源很多,例如Kafka、Flume、Twitter、ZeroMQ和简单的TCP套接字等等,数据输入后可以用Spark的高度抽象原语如:map、reduce、join、window等进行运算。而结果也能保存在很多地方,如HDFS,数据库等。和Spark基于RDD的概念..._sparkstreaming支持用户自定义数据源,但暂不支持__语言。 a: java