about云开发-活到老 学到老

 找回密码
 立即注册

QQ登录

只需一步,快速开始

扫一扫,访问微社区

查看: 28426|回复: 4

单机模式、伪分布模式、完全分布式详解

[复制链接]

537

主题

699

帖子

7277

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
7277
发表于 2014-2-8 22:51:33 | 显示全部楼层 |阅读模式
问题导读
1.单机模式、伪分布模式、全分布式模式的区别在什么地方



单机模式(standalone)
       单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的应用逻辑。

评论:此程序一般不建议安装,网络上很少这方面资料

伪分布模式(Pseudo-Distributed Mode)
      伪分布模式在“单节点集群”上运行Hadoop,其中所有的守护进程都运行在同一台机器上。该模式在单机模式之上增加了代码调试功能,允许你检查内存使用情况,HDFS输入输出,以及其他的守护进程交互。


评论:比如namenode,datanode,secondarynamenode,jobtracer,tasktracer这5个进程,都能在集群上看到。
5进程如下:


5进程的了解,详细可以查看hadoop详细了解5个进程的作用

全分布模式(Fully Distributed Mode)
Hadoop守护进程运行在一个集群上。

评论:意思是说master上看到namenode,jobtracer,secondarynamenode可以安装在master节点,也可以单独安装。
slave节点能看到datanode和tasktracer

来自群组: Hadoop技术组
欢迎加入about云群425860289432264021 ,云计算爱好者群,关注about云腾讯认证空间

33

主题

141

帖子

779

积分

中级会员

Rank: 3Rank: 3

积分
779
发表于 2014-10-13 13:01:45 | 显示全部楼层
刚好再找三者安装之间的区别。感谢管理员分享。

0

主题

87

帖子

402

积分

中级会员

Rank: 3Rank: 3

积分
402
发表于 2015-4-24 13:42:43 | 显示全部楼层
从基础学习啊

0

主题

1

帖子

10

积分

新手上路

Rank: 1

积分
10
发表于 2016-6-26 11:56:57 | 显示全部楼层
赞。不过从hadoop 2.x版本不再有jobtracker和tasktracker

2

主题

54

帖子

128

积分

注册会员

Rank: 2

积分
128
发表于 2016-8-6 09:30:45 | 显示全部楼层
作为一名初学者,有个问题困扰着我,希望高手能帮忙解答,以免走弯路,谢谢!!
hadoop是不是下面三种情况都能搭建
1.windows下直接搭建
2.windows下安装虚拟机,再安装linux,再在linux下搭建
3.双系统linux下直接搭建
4双系统linux下安装虚拟机,再虚拟机下搭建

我的笔记本年代有点久远,09年惠普,2G内存,系统xp 32位
1.上面四种情况是否行得通
2.哪种适合我现在的配置,搭建起来不会太卡,可不可以完全分布,还是只能伪分布或者单机
3.适合我现在配置的情况,所需下载全部配套软件是什么
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

站长推荐上一条 /4 下一条

QQ|小黑屋|about云开发-学问论坛|社区-大数据云技术学习分享平台 ( 京ICP备12023829号

GMT+8, 2018-4-24 18:42 , Processed in 0.474118 second(s), 41 queries , Gzip On.

Powered by Discuz! X3.2 Licensed

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表