日志
从开发角度来理解HDFS与传统数据库之间的关系
|
1.理解分布式
HDFS我们都知道它是分布式存储系统，分布式系统和我们PC机的硬盘存储有什么不同。
多台电脑有多个硬盘，算不算分布式。不是的。我们有一个管理者，但是存储的数据分布在多台pc机中，才是分布式。
2.HDFS与传统数据之间的联系
我们理解了分布式，那么什么是HDFS，或许我们知道了他的概念，结构。这里我们从另外角度看待HDFS。我们知道传统数据库有mysql，sqlserver等。那么数据能够存储在硬盘中，那么我们为什么还需要数据库。
数据库存储在在计算机存储设备上的，而且数据是按一定格式、一定规律存放的，把它们保存起来近一步的处理，进一步的抽取有用的信息。它和各种开发语言相结合，达到让数据有序的，有规律的，按照人的意愿，呈现出来。
我们能够看到数据库存储在硬盘上的。HDFS是一个分布式文件存储系统，同样也存储在硬盘上。HDFS 通过 dfs.data.dir 字段在配置文件中查询 DFS 的数据在本地文件系统中的存放位置。
3.HDFS与传统数据操作之间对比
1.查询数据：
查看hdfs的根目录下的内容的
hadoop fs -ls /
select * from table 显示表中数据
2.创建分类
在hdfs上创建文件夹example
hadoop fs -mkdir /example
数据中创建表
create table example
(
id int identity(1,1),
content varchar(10) ,
constraint pk_test_id primary key(id)
)
3.插入数据
hadoop fs -put <linux source> <hdfs destination> 把数据从linux上传到hdfs的特定路径中
insert into [dbo].[表名]([字段1],[字段2]，...,[字段n]) values ('值1','值2'，。。。，'值n');
4.删除
hadoop fs -rm 删除hdfs中文件
DELETE * FROM table_name
通过以上我们在利用hadoop开发方向上或许又有了进一步的理解。下面可以查看：
Java创建hdfs文件实例
http://www.aboutyun.com/thread-6779-1-1.html
hadoop实战：Java对hdfs的编程
http://www.aboutyun.com/thread-6500-1-1.html
/2 
