worker连不上master，已困4天。。。

l206xd · 发表于 2015-6-5 13:52:30

没人之道了么....

evababy · 发表于 2015-6-10 13:57:35

SPARK_MASTER_IP直接写IP
注释如下hosts，只保留集群间解析
#127.0.0.1 ……
#：：1 ……

crontab · 发表于 2015-11-29 21:23:45

这个问题也困扰了我很久，最后通过修改spark-env.sh解决了

crontab · 发表于 2015-11-29 21:27:54

export SPARK_MASTER_IP=xx.xx.xx.xx
export MASTER=spark://hadotest1:7077
export SPARK_MASTER_PORT=7077
export SPARK_WORKER_CORES=1
export SPARK_WORKER_INSTANCES=1
export SPARK_WORKER_MEMORY=8g
应该声明一下master_ip 就可以了吧

yisun123456 · 发表于 2017-9-12 18:10:37

楼主解决了吗同样问题

yisun123456 · 发表于 2017-9-12 18:11:10

l206xd 发表于 2015-6-5 13:52
没人之道了么....

楼主解决了吗同样问题

yisun123456 · 发表于 2017-9-12 18:12:26

crontab 发表于 2015-11-29 21:27
**** 作者被禁止或删除内容自动屏蔽 ****

不好使啊

图文精华

worker连不上master，已困4天。。。

最佳新人

热心会员

推荐 /2