分享

hadoop新手问答

pig2 2014-5-9 17:41:13 发表于 问题解答 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 4 11718
本帖最后由 pig2 于 2014-5-9 17:44 编辑
我用的是双系统win7和ubuntu11.04,不是虚拟机。要安装hadoop。

1.ssh localhost 失败,但用命令能成功生成秘钥对,出现“.ssh”文件,是不是因为没装ssh?
回答:
先安装ssh,然后生成密钥。安装命令

  1. sudo apt-get install ssh
复制代码

2.用sudo apt-get install openssh-server安装ssh服务端的时候报错,首先可能网络不通,想问下Linux下是不是插上网线就自动连上网络了?
我查了一下也可能是源的问题,网上查了些源放进去还是不行。
问题:什么样的源才行?/etc/apt/source.list这个文件中放一个源和放多个源作用一样吗?
sudo apt-get update的时候也报错,有些如下:
E: The list of sources could not be read.
E: Some index files failed to download. They have been ignored, or old ones used instead.
还有几个提示忘了。
回答:
是什么网络环境,如果虚拟机看看
虚拟机三种网络模式该如何上网指导

如果是pc机器的话,也许也要配置网络
关于网络配置的一些命令,可以参考:
Ubuntu常用命令总结及修改DNS的多种方法总结



3.是不是必须openssh-client 和openssh-server 这两个都要安装?可以用软件包离线安装吗?
回答:
(1).使用
  1. sudo apt-get install ssh
复制代码
这个不出意外应该没有问题。ssh可以查看
云技术基础:集群搭建SSH的作用及这些命令的含义
(2).离线也可以,但是麻烦


4.教程上有些要求root登陆,有些要求hadoop用户登陆,问题:图形界面下用hadoop登陆以后,需要用root环境的是不是只要在命令前加 sudo 就行?
回答:
可以切换用户,比如切换root,使用下面命令

  1. su root
复制代码
切换hadoop用户名

  1. su hadoop
复制代码



5.安装Jdk时我用的“jdk-6u45-linux-i586.bin”不知道符不符合要求,另安装完后必须要修改默认jdk吗?有些教程没这步。
回答:
jdk的安装跟系统的版本有关系,64位尽量安装64位JDK,安装完毕还需要修改环境变量。可以参考下面内容:
Ubuntu 11.04 下安装配置 JDK 7   linux(ubuntu)安装Java jdk环境变量设置总结

可以看看下面的,几乎你上面的问题都有答案:
Hadoop伪分布安装过程:Hadoop单机环境搭建指南(ubuntu)


总结
以上Linux的命令都是基于ubuntu。
对于上面的问题,可以参考
零基础学习hadoop到上手工作线路指导(初级篇)


本帖被以下淘专辑推荐:

已有(4)人评论

跳转到指定楼层
yongjian3311 发表于 2015-4-7 23:40:16
linux新手,mark
回复

使用道具 举报

yys9621 发表于 2016-1-13 17:11:43
版主好!我是新手,感谢论坛提供了这么好的平台,让我知道如何开始学习Hadoop,我已经看完论坛中的一些新手入门贴,包括:《Hadoop新手学习指导》《零基础学习hadoop到上手工作线路指导(初级篇)》等等,对mapreduce基本概念、虚拟化、linux有了初步的了解。
     现在我想搭建环境进行进一步的学习。我们刚好有3~5台较旧的闲置PC机(2G内存,2~3GHz双核CPU,win2002系统)可供调用,有交换机可组局域网,所以我想直接配置真实的多点环境进行学习。但论坛好像没有类似的操作指引帖子,希望版主和各位大神能指导指导,拜谢!
回复

使用道具 举报

yys9621 发表于 2016-7-19 15:34:22
已通过学习论坛相关帖子,完成3节点的hadoop集群搭建,非常感谢!
回复

使用道具 举报

anotatta 发表于 2016-9-20 14:09:50
Good, day day up
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条