日志
- 分享
storm数据健壮性之我见
-
2014-6-7 08:54
-
研究storm也有一段时间了,对storm的各种特性也有了一点点浅薄的认识,在此写出来给兄弟伙分享分享,如有不对的地方还望兄弟伙们不吝指教。 storm号称可以让spout出来的每一个消息都能得到有效的处理,不会出现消息丢失的情况,它又是如何做到的呢,详细信息可以参考原文(&n ...
-
1194 次阅读|0 个评论
- 分享
sqoop 常用命令
-
2014-5-11 12:49
-
最新研究了下hadoop生态系统圈的各种常用组件。今天来总结下sqoop的常用命令 Sqoop 常用命令 查看Sqoop命令信息 输入"sqoop help"会显示出当前版本下的所有命令信息。 输入"sqoop help command name"会显示出该命令的具体使用方法。 查看数据库/表信息 输入" sqoop list-databases --connect jdbc:mysql://192. ...
-
1730 次阅读|0 个评论
- 分享
Hbase 源码调试小技巧
-
2014-4-4 12:52
-
最近在学习Hbase的时候,遇到一些小问题,于是查看了下源码。以TableInputFormat的getSplits()为例。直接进去看,看的迷迷糊糊的,似懂非懂。于是有了调试一下的想法。 当然,首先还是的有一个搭建好的Hbase环境。 &nbs ...
-
795 次阅读|0 个评论
- 分享
Mapreduce Hbase操作
-
2014-3-31 23:15
-
学习了Hbase和hadoop以后很难不让我联想到怎么样利用htable中的数据进行mapreduce操作以及怎么把mapreduce的数据reduce到htable中。 下面直接上代码 package com.org.mapreduce.hbase; import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.conf.Configured; import ...
-
834 次阅读|0 个评论
- 新手帮助
- 新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »