用户组:游客
两个agent消费同一个kafka的topic,写入都到各自的hdfs文件夹中如何实现? 补充下,不启用flume的replicating功能,主要考虑最 ...
1、flume1.8是否可以解决多级目录检索?2、如图,利用1.8TAILDIR监听多个目录,执行时没有报错,但是不能监听这俩个目录,请问是 ...
flume1.8是否可以监听的同时打印此时监听的精准时间? apache commons io和flume监听文件夹变化各自的优缺点? 求大神给我一些 ...
avro-memory-logger.sources = avro-source avro-memory-logger.sinks = logger-sink avro-memory-logger.channels = memory-c ...
只是少部分文件损坏,mapreduce任务会终止,解压结果比压缩文件小很多?
本想搭建一个 flume+hdfs+kafka+storm+mysql 的日志实时分析和存储的系统,但是flume日志收集这块一直不通,查看flume的日志也没 ...
为了集群的管理Cloudera Manager,并安装CDH的flume1.5.0,现在我需要把第三方插件加入flume1.5.0中并引用,该怎么做呢?我直接 ...
flume 怎么可以自定义分目录存储和自定义日志文件名,目前使用的是直接存储文件的形式
由于公司业务需要,我需要通过flume监控日志上传到solr服务器,目前这一步已经做到 但是最终的目的还没有达成,遇到了点问题。 ...
现在想获取应用的日志,监控一个目录,但是这个目录中的文件会一直变化,flume监控的目录下的文件不允许编辑,有什么办法实现? ...
想确定一下一台机器到底能不能运行多个agents,也没有找到相关的官方文档。我自己实验了一下 自定义的source和sink,channel使 ...
一开始数据可以实时录入,可是一段时间后,就出问题了,日志已经产生到了12:00,而数据入es才到11:30,差了30分钟,请高手帮看一 ...
求solr+flume的搭建文档,不依赖于hdfs,用于分析日志
有人遇到过这种问题吗,我按照网上的安装了32位包,可还是会报错 ,完整报错如下: bash: export FLUME_HOME=/home/grid/f ...
我现在考虑用flum做日志管理,有几个问题想问问做过的朋友: 1.flume对于远程文件,如果不采用agent方式,有什么好办法来保证日 ...
最近公司有个需求,就是用flume将一文件夹下的许多小文件分类,自定义sink端持久化到数据库,但是遇到一个问题,就是那些被flume ...
tail 采集日志入库,flume-ng跑一段时间后取到的日志不完整了,,一条数据 前面被截了几十个字符采集日志为nginx 日志一条 大约 ...
本版积分规则 发表帖子
查看 »