Shell中判断HDFS中的文件或目录是否存在

在Linux文件系统中,Shell脚本判断某个文件是否存在:

# 这里的-f参数判断$file是否存在 
if [ ! -f "$file" ]; then
  echo "文件不存在!"
fi

Hadoop提供了test命令判断HDFS上某个文件或目录是否存在:

[root@node00 ~]# hdfs dfs -help
...
-test -[defsz] <path> :
  Answer various questions about <path>, with result via exit status.
    -d  return 0 if <path> is a directory.
    -e  return 0 if <path> exists.
    -f  return 0 if <path> is a file.
    -s  return 0 if file <path> is greater than zero bytes in size.
    -z  return 0 if file <path> is zero bytes in size, else return 1.
...

test命令来判断某个文件或目录是否存在。如果文件或目录存在,返回0;反之返回1。

[root@node00 ~]# hdfs dfs -test -e /path/not/exist
[root@node00 ~]# echo $?
1
[root@node00 ~]# hdfs dfs -test -e /path/exist
[root@node00 ~]# echo $?
0
[root@node00 ~]# 

那么我们可以在Shell脚本里面判断HDFS上某个文件是否存在

#!/bin/bash
hdfs dfs -test -e /path/exist
if [ $? -eq 0 ] ;then 
    echo 'exist' 
else 
    echo 'Error! NO Such File Or Directory !' 
fi
...

test 命令还可以判断:

  1. -d某个路径是否是文件夹( -d);
  2. -f某个路径是否是文件( -f);
  3. -s某个文件大小是否大于0;
  4. -z某个文件大小等于0
#!/bin/bash

#判断是否是文件夹
hdfs dfs -test -d /path/exist
if [ $? -eq 0 ] ;then 
    echo 'Is a directory' 
else 
    echo 'Is not a directory' 
fi

#判断是否是文件
hdfs dfs -test -f /path/exist
if [ $? -eq 0 ] ;then 
    echo 'Is a file' 
else 
    echo 'Is not a file' 
fi

#判断文件大小是否大于0
hdfs dfs -test -s /path/exist
if [ $? -eq 0 ] ;then 
    echo 'Is greater than zero bytes in size' 
else 
    echo 'Is not greater than zero bytes in size' 
fi
 
#判断文件大小是否等于0
hdfs dfs -test -z /path/exist
if [ $? -eq 0 ] ;then 
    echo 'Is zero bytes in size.' 
else 
    echo 'Is not zero bytes in size. '
fi
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值