立即注册 登录
About云-梭伦科技 返回首页

arsenduan的个人空间 https://www.aboutyun.com/?1407 [收藏] [复制] [分享] [RSS]

日志

Spark中,分享Java和Scala APIs

已有 457 次阅读2015-3-29 15:21

分享Java和Scala APIs

         一旦你有了一个SparkContext,它将服务作为你的主入口点。您能够使用SparkContext实例来发布更多的Spark工作,并且添加或者删除依赖。你能够使用非数据驱动的方法,这些方法如下所示:

addJar(path)

为后来的job工作添加jar文件这将贯穿于SparkContext实例中。

addFile(path)

下载这个路径的文件到集群中的所有的节点中。

stop()

关闭SparkContext连接。

clearFiles()

删除文件,以便于新的节点不会加载它们。

clearJars()

删除未来的工作jobs所需要的jar包。


路过

雷人

握手

鲜花

鸡蛋

评论 (0 个评论)

facelist doodle 涂鸦板

您需要登录后才可以评论 登录 | 立即注册

关闭

推荐上一条 /2 下一条