设为首页 加入收藏

TOP

Flume监控目录并读取新添加的文件
2018-11-28 17:55:51 】 浏览:21
Tags:Flume 监控 目录 读取 添加 文件
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/shen_jz2012/article/details/48057285
官方文档:http://flume.apache.org/FlumeUserGuide.html#spooling-directory-source
使用spoolDirectory作为agent的source可以让flume自从监控指定的spoolDir目录,一旦有新文件生成就读取它并将它发送出去,已经读取过的文件会打上.COMPLETE后缀,不会重复发送。具体配置在官方文档中讲解得非常详细,这里列出我自己的例子,简要说明一下。
图1 用于spoolDir的agent配置文件
主要将type类型设置为spooldir,另外需要指定spoolDir的路径,如图中1和2处所示。
】【打印繁体】【投稿】【收藏】 【推荐】【举报】【评论】 【关闭】 【返回顶部
上一篇Flume之Failover和Load balancing.. 下一篇kafka无法收到flume采集的数据的..

最新文章

热门文章

Hot 文章

Python

C 语言

C++基础

大数据基础

linux编程基础

C/C++面试题目