分享

日志管理分析系统架构设计求助!!!

fly2015 发表于 2015-1-27 10:39:32 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 4 26110
现在有这么一个场景实现日志的管理及分析:
需要从日志服务器上采集不同类型的日志文件,如syslog,审计日志,业务系统日志等,
采集完需要格式化存储供后续分析,需要对采集到的日志做比较灵活的查询统计,并保存
结果展示到页面。
以上应用场景该如何技术架构呢?

已有(4)人评论

跳转到指定楼层
rsgg03 发表于 2015-1-27 11:29:56
日志分析框架不少,用的比较多的是
日志采集,可以通过flume传递到hdfs上,然后通过hbase存储,利于查询。还有统计的话,可以hbase、hive整合。
hive统计的结果,可以放到mysql中,可以使用页面展示。
可以采用下面基本框架:
flume+hbase+hive+mysql
回复

使用道具 举报

hua0704 发表于 2015-1-29 10:54:00
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条