Flume 总结（四）sinks类型-1.9.0新版

Flume 总结（四）sinks类型-1.9.0新版

1. sinks

1. HDFS Sink
   
   

注意，日志数据放到hdfs或者其他地方，一般都是根据时间进行文件管理分类，一般都是天，也有以小时进行存储的
当以时间进行存放时，可以时间建立目录，这时候时间可以从日志中取（需要在拦截器中取出时间戳放进event的header中）
当以时间进行文件命名或者参与命名时，可以对时间进行的间隔进行设计，例如以小时，则可以设计10小时建立下一个目录
由于日志较多，存入hdfs时，可以设计以存入条数，存入文件大小，存入时间间隔进行文件滚动规则设置

2. Hive Sink
   
   
   
3. Logger Sink
4. Avro Sink
   

使用avro，可以进行agent级联，组成复杂的网络和层级

5. Thrift Sink
   
6. IRC Sink
   
7. File Roll Sink
   
8. Null Sink
   
9. HBaseSink

自动查找会去环境变量对应软件hbase的配置文件中

10. HBase2Sink

11. AsyncHBaseSink
    

12. MorphlineSolrSink

13. ElasticSearchSink
    
    
    

14. Kite Dataset Sink
    

15. Kafka Sink
    
    
    
    

16. HTTP Sink
    

17. Custom Sink

自定义sink