hadoop提交job卡住不动

Joker 发表于 2015-10-23 13:45
又或者是yarn挂掉了，你不知道而已。你需要看下8088是否可以访问

可以访问。不知道为什么 现在任务的状态总是[size=14.3999996185303px]UNDEFINED

jlon 发表于 2015-10-23 14:19
可以访问。不知道为什么 现在任务的状态总是UNDEFINED

看看LOG日志具体信息，单从这个看看不错来什么问题

Joker 发表于 2015-10-23 14:28
看看LOG日志具体信息，单从这个看看不错来什么问题

头疼的事。hive日志和hadoop日志都没报错。

jlon 发表于 2015-10-23 14:35
头疼的事。hive日志和hadoop日志都没报错。

把你的yarn-site.xml配置发出来看下，把各个节点的状态发出来看下

Joker 发表于 2015-10-23 14:49
把你的yarn-site.xml配置发出来看下，把各个节点的状态发出来看下

你看看。

先把你的RunJar的id kill掉, 然后配置下yarn，建议你好好看看集群的配置，论坛也有很多资料，楼上的也发了链接

[mw_shl_code=xml,true]<configuration>
        <property>
               <name>yarn.nodemanager.aux-services</name>
               <value>mapreduce_shuffle</value>
        </property>
        <property>                                                               
<name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>
               <value>org.apache.hadoop.mapred.ShuffleHandler</value>
        </property>
        <property>
               <name>yarn.resourcemanager.address</name>
               <value>master:8032</value>
       </property>
       <property>
               <name>yarn.resourcemanager.scheduler.address</name>
               <value>master:8030</value>
       </property>
       <property>
            <name>yarn.resourcemanager.resource-tracker.address</name>
             <value>master:8031</value>
      </property>
      <property>
              <name>yarn.resourcemanager.admin.address</name>
               <value>master:8033</value>
       </property>
       <property>
               <name>yarn.resourcemanager.webapp.address</name>
               <value>master:8088</value>
       </property>
</configuration>
[/mw_shl_code]

学习了