特牛生活网

大数据之Kafka开发实例_kafka链接flume 编写配置文件,将kafka作为输入,在生产者中输入“helloflume”-CSDN博客

网友收藏
文章浏览阅读1k次。外部系统的集成,即通过不同的生产端或消费端来实现数据消费过程。1、集成flumeflume是大数据开发者常用的组件,主要是高可用高可靠的日志系统,通过编写.conf文件来实现对日志文件的收集后转存到文件或hdfs集群的操作(离线日志文件)。可用于kafka的生产者,也可用于kafka的消费者。1)、flume作为生产端前期准备:启动kafka集群和zookeeperzk.sh startkf.sh start先启动kafka的消费者,便于接收flume生产端发送的数据_kafka链接flume 编写配置文件,将kafka作为输入,在生产者中输入“helloflume”或其