求助帖，为何shuffle时间会是负数？

会不会是你集群时间不同步，所以出现这个问题了。我也经常遇到这个问题，就是一个job只有map，但最后map的时间却大于总时间。所以你检查下各个结点的时间是否一致。

gwgyk 发表于 2015-6-4 09:30
会不会是你集群时间不同步，所以出现这个问题了。我也经常遇到这个问题，就是一个job只有map，但最后map的 ...

恩，可能是这个问题，有个节点慢一分钟

树叶的狂欢 发表于 2015-6-4 11:26
恩，可能是这个问题，有个节点慢一分钟

你把时间都同步了试试看，如果有作用的话跟我说一声啊。

gwgyk 发表于 2015-6-5 09:44
你把时间都同步了试试看，如果有作用的话跟我说一声啊。

恩，应该就是这个原因，没用再碰到时间负数的情况了，谢谢！

此贴终结！
解决方法：同步hadoop集群各节点时间

树叶的狂欢 发表于 2015-6-5 10:41
恩，应该就是这个原因，没用再碰到时间负数的情况了，谢谢！

此贴终结！

你是用什么方法同步集群时间的？

gwgyk 发表于 2015-6-5 19:50
你是用什么方法同步集群时间的？

网上百度的，命令：ntpdate time.nist.gov  ，其中time.nist.gov是一个时间服务器

树叶的狂欢 发表于 2015-6-5 19:52
网上百度的，命令：ntpdate time.nist.gov  ，其中time.nist.gov是一个时间服务器

对，就是这个ntp，用起来复杂吗 ？

gwgyk 发表于 2015-6-6 10:00
对，就是这个ntp，用起来复杂吗 ？

每台机器上运行这个命令就行了，时间就能同步了