您的位置:首页 > 其它

Flume实时采集数据

2016-07-07 15:27 801 查看
原文地址:https://github.com/ningg/flume-ng-extends-source#%E7%BC%96%E8%AF%91

场景

收集日志,具体场景:

应用运行时,每天都在指定目录下,产生一个新的日志文件,日志文件名称:
HH_2015-02-25.txt
,注:文件名中包含日期信息;
应用运行时,向当日日志文件追加内容,例如,在2015年02月25日,应用的运行信息,会实时追加到
HH_2015-02-25.txt
文件中;
实际说个例子:

应用生成的日志文件,都在目录:
E:/app/log
下;
2015年02月24日,应用在目录
E:/app/log
下,生成文件
HH_2015-02-24.txt
,并且,运行信息会实时追加到此文件中;
2015年02月25日,应用在目录
E:/app/log
下,生成新的文件
HH_2015-02-25.txt
,并且,将当日的运行信息实时追加到此文件中;
特别说明:此场景的解决方案就是下文提到的
SpoolDirectoryTailFileSource


具体参考原文地址
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: