分享

sparkStreaming+Kafka问题

星语心愿 发表于 2018-4-12 21:57:33 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 2 4793
JavaPairReceiverInputDStream<String, String> dataStream = KafkaUtils.createStream(jssc, zkQuorum, group, topicmap);
使用KafkaUtils.createStream接收kafka发送的数据,返回的是key-value形式,可是key值为null, 怎么设置才能使key值不为null呢?是在kafka发送端设置还是在sparkStreaming端设置,怎么设置?

已有(2)人评论

跳转到指定楼层
hello2018 发表于 2018-4-13 14:57:35
这是整个流程的,还有你的代码实现。
建议调试下。
首先确保,发送key不能null,然后在设置。
回复

使用道具 举报

hello2018 发表于 2018-4-13 15:01:30
调试参考
Spark 1.5.0 远程调试
http://www.aboutyun.com/forum.php?mod=viewthread&tid=15679

Spark通过IntelliJ IDEA远程调试

http://www.aboutyun.com/forum.php?mod=viewthread&tid=9877


更多可以自己找找
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条