分享

hdfs test 命令

arsenduan 发表于 2015-11-28 20:34:32 [显示全部楼层] 回帖奖励 阅读模式 关闭右栏 1 7376
有时候需要写一个脚本测试hdfs中的某个文件或者目录是否存在,比如当接收机发现磁盘分区剩余空间已经到了危险值的时候,需要首先测试一下是否日志已经存入HDFS目录,如果是,则可以删除接收机上的本地日志文件,避免磁盘满的事故。

下面是hdfs2.0的test命令介绍:

[mw_shl_code=bash,true]hdfs dfs -help  [/mw_shl_code]
[mw_shl_code=bash,true]-test -[defsz] <path>:  Answer various questions about <path>, with result via exit status.  
                  -d  return 0 if <path> is a directory.  
                  -e  return 0 if <path> exists.  
                  -f  return 0 if <path> is a file.  
                  -s  return 0 if file <path> is greater than zero bytes in size.  
                  -z  return 0 if file <path> is zero bytes in size.  
                else, return 1.  [/mw_shl_code]


注意,上面的这些test flag参数是互斥的,每次只能使用一个。



下面是调用示例:
测试路径是否存在
[mw_shl_code=bash,true]# hdfs dfs -test -e /data/mv/mvreport/201410/20141019/117-121-54-107-20141019-0000.seq  
# echo $?  
0  [/mw_shl_code]


bash中用$?获取最近一次调用的返回值。
还可以用-s 和 -z参数,

如果文件尺寸大于0,则-s 返回0, 否则返回1

如果文件尺寸为0,则-z返回0,否则返回1



已有(1)人评论

跳转到指定楼层
lmlm1234 发表于 2015-11-29 10:22:22
有时候需要写一个脚本测试hdfs中的某个文件或者目录是否存在,比如当接收机发现磁盘分区剩余空间已经到了危险值的时候,需要首先测试一下是否日志已经存入HDFS目录
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关闭

推荐上一条 /2 下一条