图文精华

hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布 ...

About云-梭伦科技 › 日志

日志

云技术| 其他| 开源资料| 云技术基础|

置顶 ·分享 spark开发基础：一文能帮助大家阅读比较常见的Scala程序: pig2 2016-11-6 19:52; 问题导读 1.Scala中有哪些常见符号？ 2.本文讲了哪些符号？ 3.你对符号的理解是什么？ 4.-,-,=,Int=,_ 它们含义是什么？用在什么地方？当我们学习spark的时候，我们知道spark是使用Scala语言开发的，由于语言是相通的，所以对于传统程序员【Java，.net，c等】，我们能看懂Scala程序是 ...; 1720 次阅读|0 个评论

置顶 ·分享 hadoop、hbase、hive、zookeeper版本对应关系: pig2 2014-4-9 21:58; 最新版本： hadoop、hbase、hive、zookeeper版本对应关系续 hadoop与HBase版本对应关系: Hbase Hadoop 0.92.0 1.0.0 0.92.1 1.0.0 0.92.2 1.0.3 0.94.0 1.0.2 0.94.1 1.0.3 0.94.2 1.0.3 0 ...; 25808 次阅读|7 个评论热度 17

分享新手指导：mapreduce的key与value输入输出参数为什么会让你迷惑: pig2 2014-5-1 02:50; 问题导读： 1.我们所定义的map函数与reduce函数是用来干什么的？ 2.key和value分别代表什么意思？很多在写mapreduce，但是有的写的不太明白，并不太了解我们为什么这么写，为什么会让我们感到迷惑。这是因为它与我们传统编程有所不同，我们一个函数，有明确的数据源，明确的传入传出值，但是这里mapred ...; 个人分类: 云技术|5262 次阅读|0 个评论

分享真正让你明白mapreduce功能及key与value的值所代表的含义: pig2 2014-5-1 01:06; 问题导读： 1.我们所定义的map函数与reduce函数是用来干什么的？ 2.key和value分别代表什么意思？很多在写mapreduce，但是有的写的不太明白，并不太了解我们为什么这么写。首先说map函数中的key和value Key: 都说是偏移量，这里换另外一种说法，我们是否知道字符串的长度，使得也就是说我们首先 ...; 个人分类: 云技术|1259 次阅读|0 个评论

分享 hadoop2.x常用端口及定义方法（方便以后查询）: pig2 2014-4-26 22:01; 问题导读： 1.DataNode的http服务的端口、ipc服务的端口分别是哪个？ 2.NameNode的http服务的端口、ipc服务的端口分别是哪个？ 3.journalnode的http服务的端口、ipc服务的端口分别是哪个？ 4.ResourceManager的http服务端口是哪个？ 5.NodeManager的http服务端口是哪个？ ...; 个人分类: 云技术|3012 次阅读|0 个评论

分享 hbase-0.90.2中创建表、插入数据，更新数据，删除数据实例: pig2 2014-4-25 20:33; 问题导读删除表应该注意什么问题？如何创建列族？如何插入数据？如何更新用户信息与关系型数据库更新的区别在什么地方？ hbase通过什么标准来区别两条记录是否相同？所需要的包有： commons-codec-1.4.jar commons-logging-1.1.1.jar hadoop-0.20.2-core.jar hbase-0.90.2.jar lo ...; 个人分类: 云技术|791 次阅读|0 个评论

分享 hive与hbase的十大区别与联系: pig2 2014-4-16 18:07; 共同点： 1.hbase与hive都是架构在hadoop之上的。都是用hadoop作为底层存储区别： 2.Hive是建立在Hadoop之上为了减少MapReduce jobs编写工作的批处理系统，HBase是为了支持弥补Hadoop对实时操作的缺陷的项目。 3.想象你在操作RMDB数据库，如果是全表扫描，就用Hive+Hadoop,如果是索引访问，就用HBase+Hadoo ...; 个人分类: 云技术|3853 次阅读|1 个评论热度 6

分享 hive为什么与hbase整合: pig2 2014-4-11 12:36; 1.hive为什么与hbase整合？ 2.hive整合hbase的优缺点是什么？网上很多hive与hbase整合文档，但是为什么要整合，下面给大家对照一下，就能看出其中的原因了。首先我们看一下 1.hbase 目前支持的功能 1. 通过SQL语句来查询hbase中的表数据 ListDynaBean rows = HbaseQuery.select("SQL"); ...; 个人分类: 云技术|1888 次阅读|1 个评论热度 1

分享 openstack nova命令及命令使用错误总结(HTTP 401): pig2 2014-4-4 19:08; openstack使用过程中，使用了如下命令： nova list 出现如下错误 DEBUG (shell:768) Unauthorized (HTTP 401) 然后尝试其它命令 1：列出当前用户的虚拟机 nova list 2：列出镜像 nova image-list 3：查看当前的配置类型 nova flavor-list 4：查看当前安全组 nova secgroup-list ...; 个人分类: 云技术|1453 次阅读|0 个评论

分享 openstack如何排除查找错误的两种方法: pig2 2014-4-4 17:37; 我们会经常错误，但是我们碰到错误该怎么做，该如何找到原因。对于openstack有两种办法：在上一篇文章http://www.aboutyun.com/thread-7236-1-1.html中，已经提及这里整理一下。方法1：查看日志我们进入/var/log。如果是keystone错误，就是进入keystone目录，查看相关日志方法2：debug 如： 1. ...; 个人分类: 云技术|986 次阅读|0 个评论

分享 keystone总结：如何重置keystone及keystone使用错误总结，openstack如何查找错误: pig2 2014-4-4 16:08; 我们在使用keystone的过程中，经常需要重置keystone。那么该如何重置。首先进入mysql数据库 mysql -u root -p 输入密码，进入mysql。删除数据库（这里删除会和表一起全部删除） mysql drop database keystone; 然后创建数据库（这里只是创建一个数据名字，并没有实际的表） mysql create database keystone; ...; 个人分类: 云技术|1496 次阅读|0 个评论

分享 openstack环境变量设置：是为keystone身份验证: pig2 2014-4-4 13:24; openstack使用过程中，如果不配置环境变量，执行命令每次都需要加上用户名和密码等新，很繁琐，所以我们需要配置环境变量。不配置环境变量产生的错误比较多。 1.Error： Failed to add image. Got error: The request returned 500 Internal Server Error 2.ERROR: You must provide a username ...; 个人分类: 云技术|5076 次阅读|0 个评论

123 / 3 页下一页

推荐 /2

关于我们· 联系我们· 加入我们· 小黑屋· 合作伙伴

Copyright © 2001-2024 About云-梭伦科技 Powered by Discuz! X3.4 Licensed Discuz Team.

简书 / 京ICP备2020039040号简书网举报电话：021-34700000

意见
反馈