日志
- 分享
在Ceph中创建虚拟机流程改进之分析
-
2015-1-6 17:13
-
最近在 Gerrit 中看到一个 change : https://review.openstack.org/#/c/94295/ ,它主要是对当前在Ceph中创建虚拟机的流程的改进。如果glance的backend是ceph,则nova创建虚拟机到RBD的流程是这样的: 通过glance从ceph中下载image--本地--复制image到rbd   ...
-
870 次阅读|0 个评论
- 分享
在Ceph中创建虚拟机流程改进之分析
-
2015-1-6 17:13
-
最近在 Gerrit 中看到一个 change : https://review.openstack.org/#/c/94295/ ,它主要是对当前在Ceph中创建虚拟机的流程的改进。如果glance的backend是ceph,则nova创建虚拟机到RBD的流程是这样的: 通过glance从ceph中下载image--本地--复制image到rbd ...
-
817 次阅读|0 个评论
- 分享
Ceph与OpenStack整合文档
-
2015-1-6 17:12
-
ceph cluster有两个节点,openstack作为ceph的client。 ceph-node1(admin node)devstack ubuntu12.04 192.168.88.15 ceph-node2&nb ...
-
1062 次阅读|0 个评论
- 分享
Hadoop自动化安装shell脚本
-
2015-1-1 20:48
-
理出了一个自动安装hadoop的shell脚本,脚本托管在github上面: hadoop-install 。 hadoop-install hadoop-install上脚本,all-in-one-install.sh是在一个节点上安装hdfs、hive、yarn、zookeeper和hbase,编写该脚本是为了在本机(fedora19系统)上调试mapreduce、hive和hbase;cluster-install.sh是在多个节点 ...
-
2498 次阅读|3 个评论
热度 4
- 分享
OpenStack虚拟机创建过程中镜像格式的变化过程
-
2014-12-29 18:19
-
Glance用来作为独立的大规模镜像查找服务,当它与Nova和Swift配合使用时,就为OpenStack提供了虚拟机镜像的查找服务,像所有的OpenStack项目一样,遵循以下设计思想: 基于组件的架构 – 便于快速增加新特性 高可用性 – 支持大负荷 容错性 – 独立的进程地址空间,避免串行错误 开放标准 – 对社区驱动的API提 ...
-
711 次阅读|0 个评论
- 分享
大数据云技术web编程基础:使用REST API的方式
-
2014-11-7 21:23
-
此文只要能够明白rest api两种主要使用方式就足够了 此篇文章需要知道什么是rest 详细参考: 高级工程师、架构师必读:RESTful API 该如何设计 hadoop、openstack web编程必读:什么是REST----RESTful架构起源及讲解 通过REST API访问主要有两种方式 1.使用curl 如下 使用lin ...
-
1146 次阅读|0 个评论
- 分享
Pig自定义过滤UDF和加载UDF
-
2014-10-23 23:58
-
Pig是一种数据流编程语言,由一系列操作和变换构成,每一个操作或者变换都对输入进行处理,然后产生输出结果,整体操作表示一个数据流。Pig的执行环境将数据流翻译为可执行的内部表示,在Pig内部,这些变换操作被转换为一系列的MapReduce作业。 Pig自身有许多个方法,有时候需要我们自己定制特定的 ...
-
1329 次阅读|0 个评论
- 分享
hive null该如何解决
-
2014-10-23 23:50
-
hive中NULL默认是以 '\N' 表示的 示例: 建表: hive create table null_test_1(id INT, name STRING) ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t'; OK Time taken: 0.275 seconds 插入数据: $ cat /home/work/data/null_test.txt 1 2 ...
-
1925 次阅读|0 个评论
- 分享
搭建cloudera yum服务
-
2014-10-3 14:30
-
一、安装Cloudera yum仓库 1. 下载仓库rpm包 centos6 wgethttp://archive.cloudera.com/cdh4/one-click-install/redhat/6/x86_64/cloudera-cdh-4-0.x86_64.rpm centos 5 wgethttp://archive.cloudera.com/cdh4/one-click-install/redhat/5/x86_6 ...
-
882 次阅读|0 个评论
- 分享
基于cloudera CDH5的环境搭建
-
2014-10-3 14:22
-
基于cloudera CDH5的环境搭建 http://jingyan.baidu.com/article/4ae03de32642953efe9e6b68.html
-
662 次阅读|0 个评论
- 新手帮助
- 新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »