分享

一个为spark批量导入数据到hbase的库



描述

hbrdd
hbrdd是一个方便spark批量导入数据到hbase的库。开发hbrdd-1.0的时候依赖于cdh-5.5.1的集群环境, spark依赖库为1.5.1-hadoop-2.6.0, hadoop 2.6.0, hbase 1.0.0。

由于hbrdd只是依赖于hbase、spark的通用库, 所以如果你的集群环境不是和上述的一样, 你可以下载源码修改build.sbt文件里hbase、spark的依赖库的版本, 使其与你的集群组件对应。


内容

hbaserdd.png


hbrdd-master.zip (35.4 KB, 下载次数: 6, 售价: 1 云币)

已有(2)人评论

跳转到指定楼层
desehawk 发表于 2018-3-21 11:29:50
回复

使用道具 举报

tatata000 发表于 2018-3-29 13:40:01
不错,直接上github学习了
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条