spark零基础学习线路指导[spark2已更新]

einhep · 发表于 2017-7-9 14:51:24

yangyixin 发表于 2017-7-9 13:53
版主，有一部分内容还是沿用spark1.0的东西，spark1.0和2.0的变化还是比较大的，求更新呢，或者表明适用1.0 ...

涉及到版本的基本不多，这是初步入门。

yuntian0215 · 发表于 2017-7-13 15:33:47

整理的很全面

wenia · 发表于 2017-7-24 16:39:51

赞~~~~~~~~~~~~~~~~~~~~~~~~~~~~

lieb · 发表于 2017-8-2 09:35:31

版主辛苦了

fengfengda · 发表于 2017-9-11 18:19:04

spark2.0.2与kafka2.11整合的依赖没有怎么办

desehawk · 发表于 2017-9-11 18:29:13

fengfengda 发表于 2017-9-11 18:19
spark2.0.2与kafka2.11整合的依赖没有怎么办

那有什么办法。要么自己写然后编译。要么找到合适的版本。
2.2是兼容的。如下面
[mw_shl_code=bash,true]groupId = org.apache.spark
artifactId = spark-streaming-kafka-0-10_2.11
version = 2.2.0[/mw_shl_code]
更多资料
http://spark.apache.org/docs/latest/streaming-kafka-0-10-integration.html