用户组:游客
代码是执行追加操作,往hdfs上已有的文件追加新数据,但是一直报错 Path hdfs_path = new Path(host + path + ...
当HADOOP集群是HA配置的情况下,怎么实现文件远程上传HDFS
请教各位高手:对于hadoop的HDFS文件系统,是不是可以通过socket容器(如tomcat)中的web程序(运用java api接口)进行访问吗? ...
最近测试,发现一个: 1、往hdfs上写60M大小的文件,dfs.replication设置为1: 使用1个datanode,该1个datanode下有60M数据; ...
H,各位大神,近期我们集群遇到一个棘手问题,hadoop集群namenode 总是互相切换,切换的原因是zkfc服务 在监听本机nam ...
我启动hdfs忽然DataNode启动不了了,这是启动日志 SHUTDOWN_MSG: Shutting down DataNode at w/192.168.0.111 **************** ...
问题说明:在 Eclipse 中 Upload files to DFS ,上传成功后,在 eclipse 中打开文件,为空。运行 单词统计案例,就没有结果。 ...
我想实现web对hdfs的操作,包括上传文件和修改删除等,请问该用什么方法吗? 还有在哪可以找到相关的资料吗?谢谢
请教各位兄弟,最近搭建hadoop-2.6.0之后,在Window8系统中,将hadoop-eclipse-plugin-2.6.0放在eclipse\plugins\目录 ...
部署情况是6个机器,1个namendoe,1个secondnamenode,4个datanode。每个datanode节点有五个sata盘,然后在hdfs.xml中的dfs.data ...
请教下 如果客户端不装有Hadoop的话 怎么实现向集群中的HDFS系统上传下载呢吗? 这个客户端该怎么实现呢吗? 很急啊~~~麻烦 ...
目前,使用Hadoop做多的应用是数据分析,如:Web日志分析等,这些源数据通常都是文本格式,占用磁盘空间大和网络带宽高。而且,H ...
我在eclipse里往hdfs的表里追加数据,代码是追加操作,为什么一直报该文件已存在的错误呢?? 错误: org.apache.hadoop.i ...
各位专家,高手,本人小白刚开始学习hadoop,问题求解: 虚拟机ubuntu搭建hadoop1.0.4 虚拟机上用命令测试自带的wordcount,能 ...
sqoop:000> start job --jid 1 Exception has occurred during processing command Exception: org.apache.sqoop.common.Sqoo ...
求大侠帮助啊,一直都没有解决 2014-08-28 11:19:02,380 (pool-5-thread-1) Preparing to move file /data/flume/event_lo ...
java 怎么读取hdfs上csv文件的某一列 我想对某一列数进行处理,例如求均值。急诊!
hadoop 2.2.0 通过java api 操作hdfs 报错,求大神指导 安装好hadoop 2.2.0后,通过java api 操作hdfs 报错了,详细信息如下 ...
报错信息如图: 日志信息:
本帖最后由 fiberlijun 于 2009-11-19 17:12 编辑 主从结构 HDFS是一个 master/slave的架构。HDFS只有一个NameNode,即mast ...
用c++读取hdfs中的文件,使用libhdfs应该怎么配置吗? 之前用过c++调用java读取hdfs中的文件,但是c++不能读取java工程导 ...
eclispe最新版本luna连接hadoop集群,编写mapreduce程序时老是报各种莫名其妙的错误?这是为啥?
假设我有A、B、C三台机器构成的集群。HDFS配置 blocksize = 64MB,复制因子为3 ,现在有一个文件有32MB。 1,将该文件存储到HDFS ...
这段时间自学hadoop,把hadoop和jdk都安装到用户目录下面,然后在用户目录下面设置.profile文件。 但是我看网上很多介绍安装 ...
网上搜了一下说本地要配置hadoop_home变量指向hadoop安装路径,但是我本地没装啊,我的hadoop是在linux服务器上,这怎么改? ...
大家好,我在本地WIN7 64位系统中Eclipse连Hadoop(CDH 5.3.3),Eclipse连接Hadoop的时候报错:Run的时候马上报: 15/06/29 14 ...
刚安装CDH5.2后,发现dfs.datanode.max.locked.memory这个参数竟然有了4G,但是我的机子本身最大物理内存是8G。 请问这个参数是 ...
问题是这样,在虚拟机环境中搭建了cdh的hadoop集群,然后通过flume上传一个5G左右大小的日志文件到hdfs上,会报错,并导致nameno ...
我在Ubnutu上创建了多个用户,当我用非hadoop的用户并运行集群 出现 ERROR org.apache.hadoop.security.UserGroupInformati ...
之前是用定时器定时从外部取数据然后存到数据库,最后从数据库导入到hdfs,但是现在需求变了,就是希望能在定时器里拿到数据后直 ...
本版积分规则 发表帖子
查看 »