分享

问几个Flume的问题

bwboy 2014-9-29 21:31:30 发表于 疑问解答 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 2 13882
我现在考虑用flum做日志管理,有几个问题想问问做过的朋友:
1.flume对于远程文件,如果不采用agent方式,有什么好办法来保证日志采集的不重复性?
2.如果想保持文件的独立性,比如不同来源的日志,存入不同的目录中,是不是只能考虑在header中增加属性呢,这样对性能影响如何?
3.flume作为agent,稳定性和系统影响如何(cpu内存占用),windows我看需要用maven从编译,之后稳定性如何,如何采集windows下evt的日志?

谢谢了~

已有(2)人评论

跳转到指定楼层
bioger_hit 发表于 2014-9-30 00:13:42
1.flume目前还没有发现其它方式
2.不同来源,放入不同目录,配置不同的agent也能实现,放入header中方便配置,既然允许配置,应该不会有太大的影响,而且应该和性能关系不大。
3.采集windows下的evt日志,如果没有这种格式的话,只能对flume插件开发,可以参考flume 插件开发介绍

回复

使用道具 举报

bwboy 发表于 2014-10-3 09:01:09
bioger_hit 发表于 2014-9-30 00:13
1.flume目前还没有发现其它方式
2.不同来源,放入不同目录,配置不同的agent也能实现,放入header中方便配 ...

好的,我理解了,谢谢你的回复
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条