about云日志分析项目准备5:hadoop,spark,kafka,flume,hive等工具的版本选择

查看数: 4326 | 评论数: 2 | 收藏 3
关灯 | 提示:支持键盘翻页<-左 右->
    组图打开中,请稍候......
发布时间: 2016-12-18 21:47

正文摘要:

问题导读: 1. 不同工具版本选择时只要考虑什么因素? 2. 有没有可推荐的版本组合? 由于整个项目需要使用到hadoop、spark、kafka、flume、hive,scala,所以对于不同软件之间的兼容性还是需要考虑的。主要考 ...

回复

Tank_2000 发表于 2016-12-22 23:20:51
方案一中的软件包下载地址

链接:http://pan.baidu.com/s/1eRJctZ8 密码:u8jh
pig2 发表于 2016-12-21 09:46:16
方案一:hadoop 2.6.5 + spark 1.6.3 + kafka 0.9.0.1 + flume 1.6.0 + hive 1.2.1 + scala 2.11.8
特点:稳定性比较好,开发可能会快一些,后期考虑在升级,因此采用此方案。


方案二:hadoop 2.7.3 + spark 2.0.2 + kafka 0.10.1.0 + flume 1.7.0 + hive 1.2.1 + scala 2.11.8

版本比较新,稳定性可能差一些
关闭

推荐上一条 /2 下一条