立即注册 登录
About云-梭伦科技 返回首页

howtodown的个人空间 https://www.aboutyun.com/?19 [收藏] [复制] [分享] [RSS]

日志

spark sql遇到问题

已有 1189 次阅读2014-8-21 03:20


1 spark sql 不支持multiple join 
如 select * from a join b on a.c1=b.c1 join c on a.c2 = c.c2
2 spark sql 不支持分区控制
repartition对之无效,在数据量大时容易heap space
3 spark left join的实现有问题,导致性能极差
4 spark sql的cache table对二层语句无效 

路过

雷人

握手

鲜花

鸡蛋

评论 (0 个评论)

facelist doodle 涂鸦板

您需要登录后才可以评论 登录 | 立即注册

关闭

推荐上一条 /2 下一条