特牛生活网

Flume综合介绍_log.info byte数组_JTZ001的博客-CSDN博客

网友收藏
第1章 Flume 概述1.1 Flume 定义Flume 是 Cloudera 提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume 基于流式架构,灵活简单。Flume最主要的作用就是,实时读取服务器本地磁盘的数据,将数据写入到HDFS。1.2 Flume 基础架构Flume 组成架构如图所示:下面我们来详细介绍一下 Flume 架构中的组件:1.2.1 AgentAgent 是一个 JVM 进程,它以事件的形式将数据从源头送至目的。Agent 主要有 3_log.info byte数组