分享

如何只读取hdfs里大文件的本地磁盘部分的数据块?

sq331335144 发表于 2013-10-25 10:44:21 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 2 6654
如何只读取hdfs里大文件的本地磁盘部分的数据块吗?
就是怎样实现数据局部性吗?吗?吗?hdfs上大文件分布式存储在datanode上,而在运行mapreduce时数据直接从本地磁盘的datablock读取并处理,但是怎么读取存储在本地磁盘的datablock呢吗?吗?吗?

已有(2)人评论

跳转到指定楼层
yuanqingyu0123 发表于 2013-10-25 10:44:21
mark一下,同求解答
回复

使用道具 举报

mexiang 发表于 2013-10-25 10:44:21
客户端获取 数据块时有相关的host addresses,查询一下就知道了
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条