分享

为什么把任务发布到spark集群上后,本地的JVM虚拟机内存变得很高?

lenovoyufeilil 发表于 2017-6-2 16:15:05 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 2 4994
为什么任务跑在集群上后本地的JVM还会占用掉我2个G的内存?

已有(2)人评论

跳转到指定楼层
arsenduan 发表于 2017-6-2 16:55:19
1.描述不太准确2.肯定是因为跑任务,需要内存,所以这样呗。




回复

使用道具 举报

w517424787 发表于 2017-6-3 09:54:31
你这应该是client模式,你的任务虽然是运行在集群上,但是你的driver肯定是在客户端,所以本地的JVM还是要消耗点内存的!
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条