日志
- 分享
Hbase version 同一条数据默认最多有三个版本
-
2014-6-27 00:46
-
将一个集群hbase中表 "VerticalDataTable" 数据插入另一张表时遇到问题,本来有十几个版本，但是只插入了3个版本 搜索后发现是因为在建表的时候，VERSIONS = 3默认为3， VERSIONS是跟columnfamily相关的所以需要修改表的 VERSIONS 属性 alter table {NAME = 'columnfamily', VERSIONS = '300'}
-
656 次阅读|0 个评论
- 分享
It is indirectly referenced from required .class file
-
2014-6-19 16:32
-
一: It is indirectly referenced from required .class file 原因：你正要使用的类调用了另一个类，而这个类又调用了其他类，这种关系可能会有好多层。而在这个调用的过程中，某个类所在的包的缺失就会造成以上那个错误。 解决方法：导入缺失的包
-
612 次阅读|0 个评论
- 分享
eclipse在线安装插件最新地址
-
2014-6-19 15:04
-
Update SitesLatest m2e release (recommended)： 翻译：发布版 http://download.eclipse.org/technology/m2e/releases m2e milestone builds towards version 1.5 翻译： 版本1.5 http://download.eclipse.org/technology/m2e/milestones/1.5 版本1.6没有经过测试： Lates ...
-
473 次阅读|0 个评论
- 分享
关于Hbase客户端和regionserver之间的单连接
-
2014-6-9 15:58
-
利用Hbase的客户端进行Get或者scan操作时，在regionserver端用netstat -anp|grep 60020时，发现每一个Hbase客户端只有一个和该regionserver的连接，无论hbase client是否开启了多个线程进行并发操作。后来翻了一下源码，果然是这样的。参见下面的源码截图， 对同一个目的地的RegionServer来说，connectio ...
-
1161 次阅读|0 个评论
- 分享
Solr高亮显示highlight的三种实现
-
2014-6-9 15:55
-
高亮显示在搜索中使用的比较多，比较常用的有三种使用方式,如果要对某field做高亮显示，必须对该field设置stored=true 第一种是普通的高亮显示Highlighter，根据查询的docIdSet，获取Documents，并获取当前document的需要高亮的field的value，根据query的term和该field的value做 ...
-
1476 次阅读|0 个评论
- 分享
hbase权威指南： store file合并（compaction）
-
2014-6-4 22:00
-
hbase为了防止小文件（被刷到磁盘的menstore）过多，以保证保证查询效率，hbase需要在必要的时候将这些小的store file合并成相对较大的store file，这个过程就称之为compaction。在hbase中，主要存在两种类型的compaction：minor compaction和major compaction。 major c ...
-
524 次阅读|0 个评论
- 分享
Twitter Storm: 创建一个新的storm项目
-
2014-6-4 21:59
-
这篇文章翻译自: https://github.com/nathanmarz/storm/wiki/Creating-a-new-Storm-project 这篇文章主要介绍如何新建一个storm项目， 主要步骤: 1. 把storm的jar包加到classpath里面去。 2. 如果使用storm的多语言特性的话， 把multilang目录也加到classpath里面去。 把stormjar包添加到classapth里面 为了 ...
-
716 次阅读|0 个评论
- 分享
客户端连接zk，不停的报错，原因目录的问题
-
2014-5-26 00:46
-
今天不小心重启了一下zookeeper服务，发现跑的好好的系统不行了 客户端连接zk，不停的报 2012-11-12 16:41:37,641 - INFO - Socket connection established to 192.168.1.102/192.168.1.102:2181, initiating session 2012-11-12 16:41:37,642 - INFO - Unable to read additional data ...
-
1668 次阅读|0 个评论
- 分享
hadoop基础：Java中的Hash值介绍
-
2014-5-1 14:06
-
我们在学习hadoop过程中，经常遇到hashcode，那么hash到底是什么？ 我们可以把它理解一个数字，如果到了这里，其实已经差不多了。那么下面如果想详细了解，可以往下面看： hashcode实例 /** * Returns a hash code for this string. The hash code for a * ...
-
492 次阅读|0 个评论
- 分享
新手指导：mapreduce不同类型的数据分到同一个分区是否会影响输出结果
-
2014-5-1 12:52
-
此篇需要对mapreduce有一定的了解，知道了解mapreduce的过程中，map需要分区，有多少个分区就有多少个reduce。 因此我们的map是如何分区的。 map 通过Partitioner实现分区。 Partitioner则是通过取余算法来实现的。 比如： 1.默认分区 key.hashcode%numPartitions 如果数值相同则被分到同一个分区。 2. ...
-
458 次阅读|0 个评论
- 新手帮助
- 新手帮助：注册遇到问题，领取资源，加入铁粉群，不会使用搜索，如何获取积分等
查看 »
/2 
