图文精华

About云-梭伦科技»专题 › 交流区 › 技术交流 › Spark › spark默认分区
分享

spark默认分区

mnd123 发表于 2016-7-1 16:00:46 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 1 9616
About云VIP帮助找工作和提升
spark默认分区，是怎么分区的？
回复

使用道具 举报

自定义广告语

已有(1)人评论

跳转到指定楼层
正序浏览
starrycheng 发表于 2016-7-1 17:38:17
hadoop有自己的分区，通过分区函数实现。
spark也是同样的道理
spark分区函数有
HashPartitioner和RangePartitioner

更多可参考：
Spark分区器HashPartitioner和RangePartitioner代码详解
http://www.aboutyun.com/forum.php?mod=viewthread&tid=15976


回复

使用道具 举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

发表新帖
mnd123

中级会员

关注

  • 1

    主题

  • 111

    帖子

  • 3

    粉丝

TA的主题
关闭

推荐上一条 /2 下一条

关于我们· 联系我们· 加入我们· 小黑屋· 合作伙伴   

Copyright © 2001-2024 About云-梭伦科技 Powered by Discuz! X3.4 Licensed Discuz Team.

简书 / Smrz 京ICP备2020039040号 Wxb 简书网举报电话：021-34700000