Spark精细深度比较：为何ShuffleManager改成了SortShuffleManager【面试必备】

查看数: 10840 | 评论数: 1 | 收藏 2

关灯 | 提示：支持键盘翻页<-左右->

发布时间: 2019-6-15 10:08

问题导读： 1.HashShuffleManager 运行原理是什么？ 2.SortShuffleManager 运行机制及其原理是什么？ 3.shuffle 相关参数如何使用？在 Spark 的源码中，负责 shuffle 过程的执行、计算、处理的组件主要是 ...

美丽天空 发表于 2019-6-18 00:21:09

感谢分享

图文精华