特牛生活网

Flume大数据日志拉取_flume拉取日志-CSDN博客

网友收藏
文章浏览阅读590次。FlumeFlume简介Flume概述Flume是一个分布式、可靠、和高可用的海量日志聚合的系统,支持在系统中定制各类数据发送方,用于收集数据同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力Flume使用场景线上数据一般主要是落地(存储到磁盘)或者通过socket传输给另外一个系统Flume的体系架构比较核心的组件Client:Client生产数据,运行在一个独立的线程。Event: 一个数据单元,消息头和消息体组成。(Events可以是日志记_flume拉取日志