分享

Hadoop2.6.0伪分布环境搭建


问题导读

1.安装hadoop需要做哪些准备?
2.如何验证hadoop是否安装成功?




hadoop安装都是差不多的,更详细安装可参考:

hadoop2.2完全分布式最新高可靠安装文档



用到的软件:
1.jpg


一、安装jdk:
1、要安装的jdk,我把它拷在了共享文件夹里面。
  (用优盘拷也可以)
2.jpg



2、我把jdk拷在了用户文件夹下面。
(其他地方也可以,不过路径要相应改变)
3.jpg


3、执行复制安装解压命令:

4.jpg

解压完毕:


5.jpg

查看解压的文件夹:

6.jpg

4、配置 环境变量:

7.jpg

写入如下5行代码:

8.jpg

使配置生效:


9.jpg

5、查看安装的jdk:

java -version

10.jpg

java

11.jpg

javac


12.jpg


二、SSH免密码登陆:
1、安装SSH:
13.jpg
2、是否生成 .ssh 目录:

14.jpg
3、如果没有生成,自己手动创建一个 .ssh 目录:

15.jpg
生成的 .ssh 目录:
16.jpg

4、生成公钥与私钥:
17.jpg
效果如下:

18.jpg

5、将公钥加入到用于认证的公钥文件中:

19.jpg
6、免密码登陆:
20.jpg
效果:

21.jpg


Ubuntu 免密码登陆,SSH配置完。

三、安装配置Hadoop:

1、复制安装解压Hadoop :

22.jpg
解压完毕效果:

23.jpg
2、配置 etc/profile

24.jpg

25.jpg

26.jpg


3、配置 hadoop-env.sh
进入

27.jpg

28.jpg

29.jpg



4、修改hadoop-2.6.0文件权限为用户权限:

30.jpg

默认没有mapred-site.xml文件,复制mapred-site.xml.template一份,并把名字改为mapred-site.xml

31.jpg

5、配置下面4个重要文件:
mapred-site.xml


32.jpg

33.jpg
core-site.xml
34.jpg

35.jpg


hdfs-site.xml


36.jpg

37.jpg

yarn-site.xml


38.jpg

39.jpg

6、格式化:
40.jpg
格式化部分效果:
41.jpg

7、启动:

先启动  start-dfs.sh:
42.jpg
效果:
43.jpg
再启动  start-yarn.sh:
44.jpg
效果:
45.jpg
关闭hadoop:

46.jpg


(注:也可以  sbin/start-all.sh:  建议分开启动。)效果一样,如下:


47.jpg

8、查看Web页面信息:

48.jpg



49.jpg

至此,hadoop-2.6.0伪分布配置成功。



http://blog.csdn.net/baolibin528/article/details/42939477

欢迎大家如about云官方群371358502,更新咨询,更新资源,随时关注

已有(1)人评论

跳转到指定楼层
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条