分享

hbase 如何提交任务到集群

bioger_hit 发表于 2015-8-3 18:13:46 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 0 16637
导读:
我们提交hadoop job都知道是什么方法,那么如何提交hbase job。





执行hbase mapreduce的两种方法:
1 使用hadoop命令执行mapreduce job.
  采用此方式需要修改hadoop-env.sh,将hbase相关的jar包加入到HADOOP_CLASSPATH中去,写法如下:

export HADOOP_CLASSPATH=$HADOOP_CLASSPATH:$HBASE_HOME/hbase-0.94.2-cdh4.2.2-security.jar


然后hadoop jar youjar.jar youclass in out来执行job,不然会报找不到hbase相关的类。


2 使用hbase 命令执行mapreduce job.
  采用此方法需要修改hbase-env.sh,将你的job jar包加入到HBASE_CLASSPATH中去,写法如下:
  export HBASE_CLASSPATH=$HADOOP_HOME/etc/hadoop:/home/hadoop/workspace/HFIleGenerator.jar


然后通过hbase youclass in out来执行job.


我觉得第二种方式比较好一些,第一种有点相互依赖的感觉了。
注意 youclass必须写类的全路径名。

欢迎加入about云群425860289432264021 ,云计算爱好者群,关注about云腾讯认证空间

没找到任何评论,期待你打破沉寂

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条