about云开发

 找回密码
 立即注册

QQ登录

只需一步,快速开始

扫一扫,访问微社区

about云开发 首页 大数据
订阅

大数据

彻底明白Flink系统学习1:Flink介绍
问题导读 1.Flink有哪三种运行模式? 2.Flink架构有几层? 3.Flink每层的作用是什么? 4.JobGraph是什么? 5.executiongraph是什么? 关注最新经典文章,欢迎关注公众号 随着分布式技术的不断发展,工 ...
分类:    2018-11-15 19:12
Flink SQL用于查询数据流和静态数据及介绍未来Flink 1.7一些功能
问题导读 1.为何会有Flink SQL? 2.本文哪些地方涉及Flink 1.7? 4.如何定义源(sources )和接收器(sinks)? 5.Flink SQL本文介绍了哪些sql? 6.将数据格式化为正确的格式以便进一步处理? 7.如何监控Fli ...
分类:    2018-11-8 12:58
什么是Hive 钩子,如何实现钩子?
问题导读 1.什么是Hive hooks? 2.什么是数据湖? 3.Hive钩子有哪些种类? 4.如何实现Hive钩子? 关注最新经典文章,欢迎关注公众号 今天讲的是Hive hooks(钩子).先简单普及下什么是Hooks。 #### ...
分类:    2018-11-5 21:11
比Hive快279倍的数据库-ClickHouse到底是怎样的
问题导读 1.什么是ClickHouse? 2.ClickHouse适合哪些场景? 3.为什么面向列的数据库查询如此快? 关注最新经典文章,欢迎关注公众号 1.什么是ClickHouse ClickHouse是一个面向列的数据库管理系统(DB ...
分类:    2018-11-1 20:25
为什么要在Kubernetes上运行Kafka,有哪些问题?
问题导读 1.为什么要在Kubernetes上运行Kafka? 2.Kafka在Kubernetes需要注意哪些问题? 3.在Kubernetes上的部署Kafka时,需要什么团队方面的合作? 关注最新经典文章,欢迎关注公众号 为什么要 ...
分类:    2018-10-31 17:11
Flink使用场景-生产环境【适合架构师、面试者】
问题导读 1.布衣格电信为何使用Flink? 2.Flink每天处理多少事件? 3.Flink集群规模时多少台机器? 关注最新经典文章,欢迎关注公众号 文章摘自Flink基础教程,由于比较经典,里面分享了处理的数据量十几 ...
分类:    2018-10-25 12:07
Flink Watermarks【水位线】详解
问题导读 1.Watermarks是什么? 2.Watermarks是为了解决什么问题? 3.如何生成watermarks? 最新经典文章,欢迎关注公众号 Flink Watermarks不容易理解,而且和windows混合,就容易造成混乱了,Waterma ...
分类:    2018-10-22 12:05
确定Apache Flink集群规模时需要考虑的6件事
问题导读 1.集群搭建本文都说了哪些因素? 2.什么情况下需要考虑网络容量? 3.什么情况需要考虑磁盘宽带? 4.除了6个因素,还有哪些需要考虑? 关注最新经典文章,欢迎关注公众号 Apache Flink社区常 ...
分类:    2018-10-18 16:49
Apache Flink如何管理Kafka消费者offsets
问题导读 1.Flink与kafka一起如何做Checkpointing ? 2.发生故障,Flink如何恢复的? 3.Kafka consumer offsets存储在什么位置? 关注最新经典文章,欢迎关注公众号 此篇出现一个词barriers ,需要对 ...
分类:    2018-10-17 17:33
Apache Flink:开发经验总结
问题导读 1.本文的背景是什么? 2.本文介绍了哪些开发经验? 3.本地开发环境正常运行,部署环境出错,原因是什么? 4.本地开发环境正常运行,部署环境出错本文是如何解决的? 5.流处理中,如何更改需求,添加 ...
分类:    2018-10-17 10:00
Spark:你还没用SparkSession吗?已经out了
问题导读 1.Spark2入门是哪个类? 2.为何要产生Spark-Session? 3.Spark-Session如何使用? 关注最新经典文章,欢迎关注公众号 看到很多同学还在使用spark1的相关api,这里将讨论Spark-Session。 为何 ...
分类:    2018-10-17 09:31
Spark Structured Streaming如何将流数据保存到Elasticseach【附代码】
问题导读 1.从哪个版本开始Elasticseach支持spark sql? 2.如何查找Elasticseach和spark sql对应版本? 3.如何实现Spark Structured Streaming数据保存到Elasticseach? 关注最新经典文章,欢迎关注公众号 ...
分类:    2018-9-27 18:40
Spark2.4有哪些新功能【尝鲜】
问题导读 1.Spark有哪些模块发生改变? 2.Barrier Execution是什么? 3.将Spark数据与AI整合的是什么项目? 关注最新经典文章,欢迎关注公众号 Spark开发者公布了Spark2.4新增功能,多模块都做了改变, ...
分类:    2018-9-21 18:45
使用Hadoop进行电子商务数据分析,了解实际工作是怎么进行的
问题导读 1.实际工作中,分析数据有哪些工作? 2.本文涉及了几张表? 3.分析了几张表? 4.本文分析数据任务是什么? 关注最新经典文章,欢迎关注公众号 我们大数据开发与传统开发到底有什么区别 ...
分类:    2018-9-19 15:49
IDEA(spark2.3)Scala如何实现本地调试
问题导读 1.本文的环境是什么? 2.如何打断点? 3.查看变量的数据有几种方式? 关注最新经典文章,欢迎关注公众号 这里重点讲如何调试,也会有视频会放到about云知识星球。 1.准备环境 (1)spark2.3 ...
分类:    2018-9-8 15:33
12下一页

相关分类

关闭

推荐上一条 /2 下一条

QQ|小黑屋|about云开发-学问论坛|社区 ( 京ICP备12023829号

GMT+8, 2018-11-18 18:26 , Processed in 0.135939 second(s), 13 queries , Gzip On.

Powered by Discuz! X3.2 Licensed

返回顶部