简述flume各组件的职责

Flume是一个分布式的、可靠的、高可用的海量日志采集、聚合和传输的系统。其主要组件包括：

1. Source：数据源组件，负责从数据源（如日志文件、网络端口等）采集数据，并将数据发送到Channel中。

2. Channel：数据缓存组件，负责缓存从Source中采集到的数据，以便后续的处理。Flume支持多种类型的Channel，如Memory Channel、File Channel、JDBC Channel等。

3. Sink：数据输出组件，负责将Channel中的数据发送到目标存储系统（如HDFS、HBase、Kafka等）或其他系统（如Flume的另一个Agent）。

4. Interceptor：数据预处理组件，负责对采集到的数据进行预处理，如格式转换、过滤、添加元数据等。

5. Channel Selector：负责将数据从Source发送到指定的Channel中。

6. Sink Processor：负责将Channel中的数据发送到指定的Sink或一组Sink中。可以根据数据的类型、大小、来源等条件进行动态的Sink选择。

以上组件共同组成了Flume的数据流处理管道，实现了高效、可靠的数据采集、聚合和传输。