立即注册 登录
About云-梭伦科技 返回首页

pig2的个人空间 https://www.aboutyun.com/?61 [收藏] [复制] [分享] [RSS]

日志

置顶 ·分享 spark开发基础:一文能帮助大家阅读比较常见的Scala程序
2016-11-6 19:52
问题导读 1.Scala中有哪些常见符号? 2.本文讲了哪些符号? 3.你对符号的理解是什么? 4.-,-,=,Int=,_ 它们含义是什么?用在什么地方? 当我们学习spark的时候,我们知道spark是使用Scala语言开发的,由于语言是相通的,所以对于传统程序员【Java,.net,c等】,我们能看懂Scala程序是 ...
1720 次阅读|0 个评论
置顶 ·分享 hadoop、hbase、hive、zookeeper版本对应关系
2014-4-9 21:58
最新版本: hadoop、hbase、hive、zookeeper版本对应关系续 hadoop与HBase版本对应关系: Hbase Hadoop 0.92.0 1.0.0 0.92.1 1.0.0 0.92.2 1.0.3 0.94.0 1.0.2 0.94.1 1.0.3 0.94.2 1.0.3 0 ...
25828 次阅读|7 个评论 热度 17
分享 让你真正明白什么是MapReduce,组合式,迭代式,链式
2014-4-18 15:31
够到这一步,说明已经对hadoop入门,并且产生问题。这个问题,似乎困惑了不少初学者。 1.比如我们输出的mapreduce结果,需要进入下一个mapreduce,该怎么解决? 可以使用迭代式 2.那么什么是迭代式? 3.什么是依赖式? 4.什么是链式? 5.三种模式各自的应用场景是什么? 网上不少资料 ...
1099 次阅读|0 个评论
分享 hive与hbase的十大区别与联系
2014-4-16 18:07
共同点: 1.hbase与hive都是架构在hadoop之上的。都是用hadoop作为底层存储 区别: 2.Hive是建立在Hadoop之上为了减少MapReduce jobs编写工作的批处理系统,HBase是为了支持弥补Hadoop对实时操作的缺陷的项目 。 3.想象你在操作RMDB数据库,如果是全表扫描,就用Hive+Hadoop,如果是索引访问,就用HBase+Hadoo ...
个人分类: 云技术|3856 次阅读|1 个评论 热度 6
分享 hadoop集群,如何运行Java jar包---如何运行mapreduce程序
2014-4-16 14:19
hadoop集群,如何运行Java jar包---如何运行mapreduce程序
hadoop集群运行mapreduce有两种方式: 1.一种是打包,在hadoop集群运行 2.一种是开发环境运行。 下面详细讲一下: 1.一种是打包,在hadoop集群运行 首先我们要打包程序,打包具体可以参考 (hadoop编程:解决eclipse能运行,打包放到集群上ClassNotFoundException:经验总结 ) http://www.aboutyun.com/thread-70 ...
2291 次阅读|0 个评论
分享 hadoop打包方式,在集群运行经验总结
2014-4-16 13:47
由于打包方式不同,有的能在集群运行,有的不能在集群运行,这里记录一下,方便以后查找。 http://www.aboutyun.com/thread-7086-1-1.html hadoop编程:解决eclipse能运行,打包放到集群上ClassNotFoundException:经验总结
443 次阅读|0 个评论
分享 100年前光绪皇帝在北京大学的讲话
2014-4-14 17:39
100年前光绪皇帝在北京大学的讲话
光绪皇帝在北京大学的讲话,读后让人有一种完全不同于过往认知的感受,一个封建皇帝没有任何八股之气息,即便今天社会上流行的陈旧腐朽之气也全然感觉不到,没有任何官场报告常用的官话、套话和空话,更加没有假话、空话和废话,读后感到很新鲜,一个古代君临天下傲视黎民的封建皇帝,却看不到太多自以为“奉天承运” ...
个人分类: 其他|796 次阅读|0 个评论
分享 30秒了解hadoop与storm之间关系
2014-4-14 15:52
我们对hadoop还是比较熟悉的,那么想学习storm,在我们hadoop的基础上,可以快速理解Storm。对比如下: bolt是相当于mapreduce中的map或者reduce的操作原语, storm中有个master,运行的守护进程是叫nimbus,相当于hadoop中的jobtracker,其他的就是worker。 运行的守护进程是supervisor,相当于hadoop中的tasktrac ...
864 次阅读|0 个评论
分享 我们为什么总是压迫自己
2014-4-12 21:51
记得以前接受一件任务的时候,心里总想是去完成它,不完成任务,心里总是有事情,而且不去做,总会感觉有压力。 我们都知道高考,有的人能够发挥正常,有的人却发挥失常,那么这是什么原因? 同样,我们在平时能够夸夸其谈,但是到了真正的事情,却不知道该说些什么? 上面这些都是什么造成的------ 压力 同样,在 ...
1374 次阅读|4 个评论 热度 5
分享 openstack dasboard使用的是什么语言,如何搭建开发环境,如何本地化
2014-4-11 17:39
1.openstack dasboard是用什么语言开发的,使用的是什么框架? openstack的dashboard采用的是django架构。 django是python的一个web开发框架 2.如何构建openstack-dashboard开发环境 搭建dashboard开发环境 以下全是普通用户身份运行 在运行controller的节点(dashboard的节点)上进行以下操作。 原 ...
4113 次阅读|0 个评论
分享 hive为什么与hbase整合
2014-4-11 12:36
1.hive为什么与hbase整合? 2.hive整合hbase的优缺点是什么? 网上很多hive与hbase整合文档,但是为什么要整合,下面给大家对照一下,就能看出其中的原因了。 首先我们看一下 1.hbase 目前 支持的功能 1. 通过SQL语句来查询hbase中的表数据 ListDynaBean rows = HbaseQuery.select("SQL"); ...
个人分类: 云技术|1888 次阅读|1 个评论 热度 1
关闭

推荐上一条 /2 下一条