Flume

Flume 介绍

Flume是分布式、可靠、高可用的日志采集传输系统，支持文件、socket、Kafka等数据源，可输出至HDFS、HBase等存储。核心角色为Agent，内部含Source（对接数据源）、Channel（数据传输通道）、Sink（数据下沉）三大组件，多Agent连接形成采集系统，适用于多数日常数据采集场景并支持自定义扩展。