分享

关于Hadoop Oozie的一些疑问

tb_dhu_hadoop 发表于 2014-8-5 11:16:12 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 1 7786
关于Oozie的资料网上貌似不多,不知各位坛友是否有相关的资料分享呢?
Oozie运行一个普通的工作流作业的命令如下:
oozie job -oozie http://localhost:11000/oozie -config job.properties -run

想问下(1)  http://localhost:11000/oozie 指的是Oozie client吗?
           (2)job.properties 文件是放在HDFS上还是本地?
            (3) 典型的Oozie工作流作业的部署为HDFS——/workflow.xml
                                                                                        /lib/***.jar
                                                                                        /job.properties
             当执行上面的运行作业的命令后,整个处理流程是什么样的?

已有(1)人评论

跳转到指定楼层
w123aw 发表于 2014-8-5 13:35:32
本帖最后由 pig2 于 2014-8-5 14:25 编辑
如你所说这方面的资料确实少
如果你学习过flume,对这个或许有一个类似的认识。
(1)第一个问题是否为客户端,你可以在浏览器中,输入地址 http://localhost:11000/oozie查看是否能访问
(2)这个是配置文件,显然是在程序运行的过程中需要读取里面的配置。

如下图flume采用类似的原理
flume-ng agent -n agent1 -c conf -f /usr/flume/conf/example -Dflume.root.logger=DEBUG,console

/usr/flume/conf/example即为配置文件。

(3)处理的流程,无非是把各个job连接起来。你可以按照自己的思路来想,至于作者具体如何实现的,无能为力了,只能到官网上看看,也期待你的答案

回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条