分享

spark2使用遇到问题总结


此总结来自about云7群552029443



####
看到群友,在使用spark2的时候,仍然使用的是spark1.x的函数。导致错误找不到类或则初始化失败。
首先spark2已经使用了SparkSession。
SparkSession是非常方便了。
例如该如何使用hive加上enableHiveSupport.
但是在远程连接hive,也就是spark读取hive表的时候,很多人读取不到,如下程序。

1.jpg

这时候我们可以在代码中加上thrift属性

2.png


这样既可读取hive表成功。

####


飞哥
waiyou148@126.com

已有(1)人评论

跳转到指定楼层
进击的阿飞 发表于 2018-4-13 17:00:55
学习了,多谢楼主~~
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条