Flume工具

一、概述Flume最早是Cloudera提供的分布式的日志收集系统，后贡献给ApacheFlume是一个高可用的，高可靠的 、健壮性，分布式的海量日志采集、聚合和传输的系统Flume支持在日志系统中定制各类数据发送方，用于收集数据(source)Flume提供对数据进行简单处理，并写到各种数据接受方(可定制)的能力(sink)。二、版本Flume0.9X：又称Flume-og，老版本的flume，需要引入zookeeper集群管理，性能也较低（单线程工作）Flume1.X：又称Flume-ng。新版本需要引入zookeeper，和flume-og不兼容三、Flume的特性可靠性：事务型的数据传递，保证数据的可靠性。一个日志交给flume来