about云开发

 找回密码
 立即注册

QQ登录

只需一步,快速开始

扫一扫,访问微社区

about云开发 首页 大数据
订阅

大数据

下级分类:  Kafka|Spark|Cloudera系列|hadoop
Spark2.4有哪些新功能【尝鲜】
问题导读 1.Spark有哪些模块发生改变? 2.Barrier Execution是什么? 3.将Spark数据与AI整合的是什么项目? 关注最新经典文章,欢迎关注公众号 Spark开发者公布了Spark2.4新增功能,多模块都做了改变, ...
分类:    2018-9-21 18:45
使用Hadoop进行电子商务数据分析,了解实际工作是怎么进行的
问题导读 1.实际工作中,分析数据有哪些工作? 2.本文涉及了几张表? 3.分析了几张表? 4.本文分析数据任务是什么? 关注最新经典文章,欢迎关注公众号 我们大数据开发与传统开发到底有什么区别 ...
分类:    2018-9-19 15:49
IDEA(spark2.3)Scala如何实现本地调试
问题导读 1.本文的环境是什么? 2.如何打断点? 3.查看变量的数据有几种方式? 关注最新经典文章,欢迎关注公众号 这里重点讲如何调试,也会有视频会放到about云知识星球。 1.准备环境 (1)spark2.3 ...
分类:    2018-9-8 15:33
Spark 高级分析:第七章第14节 用Pregel计算平均路径长度
问题导读 1.计算图中顶点之间的路径长度是什么样的过程? 2.什么是BSP?什么是Pregel? 3.GraphX中如何计算顶点之间路径长度的? 关注最新经典文章,欢迎关注公众号 上一篇:第七章第12,13节 小世 ...
分类:    2018-9-8 15:31
Cloudera Enterprise 6.0发布【集成Hadoop3.0】
问题导读 1.cloudera集成了哪些新的组件? 2.Cloudera Manager可以管理多少节点? 3.升级版本有哪些条件? 关注最新经典文章,欢迎关注公众号 Cloudera宣布Cloudera Enterprise 6.0发布,其中包含许多 ...
分类:    2018-9-2 07:49
Idea初步编程使用需要知道的事情【节省你的一到两周时间】
问题导读 1.Idea中红色字体代表什么含义? 2.灰色字体代表什么含义? 3.找不到相关包和函数原因是什么? 最新经典文章,欢迎关注公众号 Idea如果你初步使用,可能会用不习惯,特别是刚开始学习编程的大学 ...
分类:    2018-8-27 18:59
Hadoop 2.x与Hadoop 3.x的22个点比较:3.x将节省大量存储空间
问题导读 1.Hadoop3.x通过什么方式来容错? 2.Hadoop3.x存储开销减少了多少? 3.Hadoop3.x MR API是否兼容hadoop1.x? 最新经典文章,欢迎关注公众号 1.目的 在这篇文章中,我们将讨论Hadoop 2.x与H ...
分类:    2018-8-27 18:54
使用Kafka和KSQL进行实时系统日志处理 - 第1部分:过滤
问题导读 1.kafka sql的作用是什么? 2.kafka sql如何实现过滤数据? 3.kafka sql对于过去的,现在接受的,以后接受的数据如何过滤? 系统日志是现代计算运行的无处不在的标准之一。 Linux,它在I ...
分类:    2018-7-13 07:22
Kubernetes, Kafka微服务架构模式讲解及相关用户案例
问题导读 1.微服务有什么特点? 2.本文介绍了哪些案例? 3.你认为事件驱动的微服务、容器、Kubernetes和机器学习结合可以带来哪些发展? 随着当今业务和技术的快速变化,开发人员,数据科学家和IT运营 ...
分类:    2018-7-5 18:52
hadoop2.2.0三个以上节点安装指导
hadoop2.2.0稳定版发布,立即下载先搭建测试环境。 1:规划 centOS6.4上搭建hadoop2.2.0环境,java版本7UP21 192.168.100.171 hadoop1 (namenode) 192.168.100.172 hadoop2 (预留当namenode) 192.168.100 ...
分类:    2018-6-17 18:38
Hadoop之使用python实现数据集合间join操作
问题导读: 1、什么是hadoop steaming? 2、python如何调用steaming? 3、如何使用hadoop steaming分析数据? hadoop之steaming介绍 hadoop有个工具叫做steaming,能够支持python、shell、C++、PHP等其 ...
分类:    2018-6-17 18:35

相关分类

关闭

站长推荐上一条 /1 下一条

QQ|小黑屋|about云开发-学问论坛|社区 ( 京ICP备12023829号

GMT+8, 2018-9-22 07:50 , Processed in 0.114637 second(s), 13 queries , Gzip On.

Powered by Discuz! X3.2 Licensed

返回顶部