日志
- 分享
kafka.common.ConsumerRebalanceFailedException异常解决办法
-
2014-11-11 15:14
-
kafka.common.ConsumerRebalanceFailedException :log-push-record-consumer-group_mobile-pushremind02.lf.xxx.com-1399456594831-99f15e63 can't rebalance after 3 retries at kafka.consumer.ZookeeperConsumerConnector$ZKRebalancerListener.syncedRebalance(Unknown Source) at kafka.consumer.ZookeeperCon ...
-
4191 次阅读|0 个评论
- 分享
Error: unable to connect to node rabbit@localhost: nodedown
-
2014-11-9 10:03
-
The database RabbitMQ uses is bound to the machine’s hostname, so if you copied the database dir to another machine, it won’t work. If this is the case, you have to set up a machine with the same hostname as before and transfer any outstanding messages to the new machine. If there’s nothing impo ...
-
2117 次阅读|0 个评论
- 分享
Storm.yaml详细配置说明收藏版
-
2014-10-28 00:42
-
配置项 配置说明 storm .zookeeper.servers ZooKeeper服务器列表 storm.zookeeper.port ZooKeeper连接端口 storm.local.dir storm使用的本地文件系统目录(必须存在并且storm进程可读写) storm.cluster.mode Storm集群运行模式( ) storm.local.mode.zmq Local模式下是否使用ZeroMQ作消 ...
-
3620 次阅读|0 个评论
- 分享
openstack Juno 版安装文档（ubuntu 14.04）
-
2014-10-20 14:38
-
安装文档 http://docs.openstack.org/juno/install-guide/install/apt/content/ ubuntu14(LTS) 链接： http://pan.baidu.com/s/1i33PqFr 密码：eccb 更多相关文档： openstack juno版发布文档汇总：各个版本安装、API、配置使用、管理员英文文档 OpenStack Juno发布说明(新增功能及改变 ...
-
1444 次阅读|0 个评论
- 分享
ZooKeeper数据模型、命名空间以及节点的概念
-
2014-9-26 16:38
-
ZooKeeper数据模型和层次命名空间 提供的命名空间与标准的文件系统非常相似。一个名称是由通过斜线分隔开的路径名序列所组成的。ZooKeeper中的每一个节点是都通过路径来识别。 下图是Zookeeper中节点的数据模型，这种树形结构的命名空间操作方便且易于理解。 图：ZooKeeper层次命名空间 Zoo ...
-
814 次阅读|0 个评论
- 分享
设置hadoop各个应用的内存
-
2014-9-15 18:17
-
下面是hadoop1的配置，不过对于hadoop2内存设置仍起着指导作用 NameNode、Jobtracker、Datanode、Tasktracker设置 conf/hadoop-env.sh 修改HADOOP_HEAPSIZE值，默认为1000MB，标题中四个应用将使用相同的配置。如果希望每个应用不一样，可以修改"conf/hadoop-env.sh"中"HADOOP_XXX_OPTS"，举 ...
-
621 次阅读|0 个评论
- 分享
国内公有云对比- 功能介绍、性能测试
-
2014-9-14 10:34
-
问题导读 1.国内云商各有什么特点？ 2.AWS性能测试中为何性能较低？ 3.本测试中OS性能、IO性能哪些云平台比较稳定？ 一、功能介绍 近一段时间以来，国内云计算市场再一次风起云涌。这一次热潮与以往热潮最大的不同，就是开始玩真的了。微软、阿里、百度、新浪、腾讯、360、IBM以及大量新兴企业，纷 ...
-
1084 次阅读|0 个评论
- 分享
Docker之大数据
-
2014-9-4 07:46
-
《基于Docker构建Apache Flume》 ：Flume 是一个高性能、高可能的分布式日志收集系统，本文介绍如何轻松地把 Docker 的特性（比如共享一个卷和只读的挂载）和 Flume 整合起来。 《使用Puppet构建Docker镜像》：文章简单介绍了如何使用Puppet来简化构建Docker镜像。 《基于Docker构建Storm和Kafka集群》 ：这篇文章主 ...
-
1115 次阅读|0 个评论
- 分享
Hadoop的namenode无法启动问题（50070无法访问，50030可以访问） .
-
2014-8-11 23:30
-
2013-08-31 10:29:31,241 ERROR org.apache.hadoop.hdfs.server.namenode.FSNamesystem: FSNamesystem initialization failed.java.io.FileNotFoundException: /opt/data/hadoop/hdfs/name/current/VERSION (Permission denied) at java.io.RandomAccessFile.open(Native Method) at java.io.RandomAccess ...
-
2187 次阅读|0 个评论
- 分享
Spark-fold
-
2014-7-27 23:37
-
Spark的fold操作用于对RDD中的元素进行迭代操作，并且利用了一个变量保存迭代过程中的中间结果。其函数原型为： fold(self, zeroValue, op) 我们先用一段代码来体验下该action的功能。 def test_fold(sc): def add(c, v): print 'c = ' + str(c) + '; v = ' + str(v) ...
-
3427 次阅读|0 个评论
- 新手帮助
- 新手帮助：注册遇到问题，领取资源，加入铁粉群，不会使用搜索，如何获取积分等
查看 »
/2 
