分享

求助java怎么把HBase数据读出并导入Hive中

qftyui1 发表于 2016-5-10 17:26:38 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 8 20143
最近做一个工作就是把HBase中某一张表的数据导入到Hive中,因为是新手以前没有接触过这方便面内容,看文档也是云里雾里,有哪位大神给耐心讲解一下,给个实际的简单点的例子参考一下,谢谢了。

已有(8)人评论

跳转到指定楼层
qftyui1 发表于 2016-5-10 18:06:10
大神们来帮忙
回复

使用道具 举报

bioger_hit 发表于 2016-5-10 18:41:17
方法有两种:
1.一种是通过Java,直接读取数据,然后在插入hive中
2.第二种是整合hbase,hive。
整合后,再创建一个表,然后将数据导入新建的hive表中
回复

使用道具 举报

qftyui1 发表于 2016-5-10 18:42:31
bioger_hit 发表于 2016-5-10 18:41
方法有两种:
1.一种是通过Java,直接读取数据,然后在插入hive中
2.第二种是整合hbase,hive。

现在是用Java的方式,请问能q q私聊吗

回复

使用道具 举报

nextuser 发表于 2016-5-10 19:59:51
qftyui1 发表于 2016-5-10 18:42
现在是用Java的方式,请问能q q私聊吗

Java开发,需要对hbase编程,hive编程熟悉,并且二者需要用到相互的包。难度系数很大,如果是刚入门,几乎不可能,会遇到各种坑。对于第二种难度相对小一些。
先整合hbase,hive。整合后,只需要hive表之间倒数据。
但是也会遇到问题,比如你的hbase与hive是否兼容。

推荐资料

hadoop,hbase,hive,zookeeper版本整合兼容性最全,最详细说明【适用于任何版本】
http://www.aboutyun.com/forum.php?mod=viewthread&tid=18015

hbase0.96与hive0.12整合高可靠文档及问题总结
http://www.aboutyun.com/forum.php?mod=viewthread&tid=7881



回复

使用道具 举报

xw2016 发表于 2016-5-10 23:09:37
我也不懂,关注大神解答
回复

使用道具 举报

qftyui1 发表于 2016-5-11 11:12:09
nextuser 发表于 2016-5-10 19:59
Java开发,需要对hbase编程,hive编程熟悉,并且二者需要用到相互的包。难度系数很大,如果是刚入门,几 ...

现在还是必须得用java的,有好的资料吗关于这个功能

回复

使用道具 举报

墨默滴 发表于 2016-5-11 11:21:21
直接hive建表用“org.apache.hadoop.hive.hbase.HBaseStorageHandler”
回复

使用道具 举报

qftyui1 发表于 2016-5-11 11:22:17
墨默滴 发表于 2016-5-11 11:21
直接hive建表用“org.apache.hadoop.hive.hbase.HBaseStorageHandler”

能具体一点吗,私聊可以不,你的qq多少

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条