特牛网址导航

Flume到底会不会丢失数据?_flume会丢失数据吗-CSDN博客

网友收藏
文章浏览阅读2.8k次。Source到Channel是事务性的,put事务Channel到Sink也是事务性的,take事务这两个环节都不可能丢失数据, 传输失败后会回滚doRollback。但是source:  (1)exec source ,后面接tail -f,这个数据也是有可能丢的。  (2)TailDir source ,这个是不会丢数据的,它可以保证数据不丢失。channel: 采用MemoryChannel,(1)在agent宕机时候导致数据在内存中丢失;(2)Channel..._flume会丢失数据吗