分享

HDFS与一般文件系统的区别

Riordon 发表于 2014-9-26 08:38:16 [显示全部楼层] 只看大图 回帖奖励 阅读模式 关闭右栏 4 19649
本地文件系统和HDFS有何区别呢?本地文件系统是构架在本地磁盘上,那HDFS是构架在什么上呢,是特定主机上还是网络上呢?如本地上传文件到HDFS,文件到底存储在哪呢?

已有(4)人评论

跳转到指定楼层
pig2 发表于 2014-9-26 12:19:25
HDFS是存储在磁盘上,看到下面配置即可,如果不认识下面配置,你可以自己搭建个集群,看看配置项说明。就会明白了。

core-site.xml
hdfs:配置的临时目录
<property>
               <name>hadoop.tmp.dir</name>
               <value>file:/home/aboutyun/tmp</value>
               <description>Abase for other temporary   directories.</description>
       </property>




hdfs-site.xml
hdfs目录:
<property>
              <name>dfs.datanode.data.dir</name>
              <value>file:/home/aboutyun/dfs/data</value>
       </property>



详细参考:

Hadoop1.x安装配置文件及参数说明



hadoop2.2完全分布式最新高可靠安装文档

回复

使用道具 举报

pig2 发表于 2014-9-26 12:24:06
hdfs是架构在磁盘上,但是它是分布式分为master和slave,上传的话,使用hadoop  shell,比如:
hadoop fs -put localfile /user/hadoop/hadoopfile

更多参考:
Hadoop Shell命令字典(可收藏)


刚开始建议参考下面三篇文章:

零基础学习hadoop到上手工作线路指导(初级篇)

零基础学习hadoop到上手工作线路指导(中级篇)

零基础学习hadoop到上手工作线路指导(编程篇)


回复

使用道具 举报

Riordon 发表于 2014-9-26 12:51:56
推荐的文章也很受用,真心感谢...
回复

使用道具 举报

sstutu 发表于 2014-9-27 01:24:12
下面内容也很经典,可以了解一下。

qubie.png
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条