Spark性能优化(三):序列化与压缩

查看数: 4391 | 评论数: 0 | 收藏 0
关灯 | 提示:支持键盘翻页<-左 右->
    组图打开中,请稍候......
发布时间: 2019-11-27 10:09

正文摘要:

1.Spark中默认的序列化方式?2.配置kryo序列化? 3.合理的设置序列化参数?         序列化有时是shuffle和cache的瓶颈,合理地设置序列化,不但能提高IO性能(包括网络IO和磁 ...

回复

关闭

推荐上一条 /2 下一条