flume第四讲avro source(自带序列化机制)_flume avro sources list lar-CSDN博客

网站介绍:flume第四讲avro source(自带序列化机制)工作机制通过监听一个网络端口来接收数据,而且接收的必须是avro序列化后的数据,avro是序列化的框架是跨语言的该source自己具备反序列化机制一般用于agenet之间的级联思想我们从日志采集服务器上采集日志,采集的速度非常快,但是flume数据直接写入hdfs的速度非常慢,时间已久就会出现数据积压的问题,我们的办法是将多设..._flume avro sources list lar